여러 AI 모델이 동의해야 코드 변경을 통과시키는 방식
소규모 팀의 내부 실험에서는 가 만든 코드 변경을 한 모델에게만 맡겨 검토하면 문제가 생겼다. 같은 모델이 가 있는 코드를 만들고도 스스로 검토한 뒤 괜찮다고 판단해 할 수 있었다. 이를 막기 위해 여러 모델이 서로 다른 관점으로 독립 검토를 하고, 모두 명확히 승인해야 변경을 통과시키는 방식으로 바꿨다.
핵심 은 단순했다. 댓글은 승인이 아니며, 오직 명시적인 승인만 승인으로 친다. 애매한 우려나 이 있으면 그 자체를 멈춰야 할 로 보고 변경을 기다리게 했다.
한 사례에서는 검토 모델들이 약 31차례 의견을 주고받은 뒤에야 의견이 모였고, 결과적으로 두 줄짜리 깨끗한 수정만 됐다. 아직 외부 사용자가 없는 내부 실험이라 일반화에는 주의가 필요하다.
핵심 포인트
- 한 모델이 자기 작업을 검토하면 오류를 놓치고 그대로 승인할 수 있다.
- 여러 모델이 서로 다른 관점으로 독립 검토한 뒤 실제로 동의해야 한다.
- 댓글이나 애매한 반응은 승인으로 보지 않고, 명시적인 승인만 인정한다.
- 검토 중 이 나오면 변경을 멈추고 더 확인한다.
- 한 내부 사례에서는 약 31차례 논의 뒤 두 줄짜리 수정만 됐다.