AI 생성 코드 검증 방법, 사람이 보기 전에 AI가 먼저 증명하게 한 팀들
15초 안에 끝나는 테스트와 서로 따지는 에이전트, LY 발표 두 편
더블테이크 노아 - 4분 분량 - 처음 쓴 날
AI가 쓴 코드는 어떻게 검증하나
AI가 쓴 코드를 사람이 처음부터 다시 읽는 방식은 오래 못 간다. LY Tech-Verse 2026 발표 두 편은 검증을 사람의 눈에서 장치로 옮겼다. 몇 초 안에 끝나는 테스트를 에이전트가 수시로 돌리게 하고, 에이전트끼리 서로의 결과를 따지게 했다. 사람은 최종 판단과 소유권을 쥐었다.
왜 사람이 다 읽는 방식으로는 안 되나?
읽는 속도가 만드는 속도를 못 따라가서다. 카카오페이손해보험 재무서버개발팀의 한 백엔드 개발자는 코드 리뷰가 어떻게 변했는지 이렇게 적었다. "리뷰가 품질 게이트가 아니라 머지 전 형식적 절차로 변질되었습니다."[3]
같은 글은 리뷰 코멘트가 실제로 얼마나 고쳐졌는지도 셌다. "188개 코멘트 중 16%(30건)가 코드 수정으로 이어졌습니다."[3] 코멘트가 달리는 것과 코드가 바뀌는 것은 다른 일이라는 숫자다. 어떤 지적을 받아들일지는 여전히 사람이 정한다.
검증을 장치로 옮기면 무엇이 달라지나?
LY 발표 팀은 원칙을 이렇게 세웠다. "핵심은 사람이 신경 쓰기 전에 AI가 스스로 자신의 작업을 입증하도록 만드는 것입니다."[2]
AI가 스스로 입증하려면 돌려 볼 테스트가 있어야 하고, 그 테스트는 빨라야 한다. 다른 LY 발표 팀은 속도를 먼저 잡았다. "시스템 에이전트가 반복할 때마다 자유롭게 이 테스트를 실행하기 위해선 속도가 중요했습니다."[1] 결과는 이렇다. "모든 테스트는 개발자 기기에서 약 15초 내에 완료됩니다."[1]
테스트가 몇 분씩 걸리면 에이전트는 매번 돌리지 않고 넘어간다. 15초라면 고칠 때마다 돌릴 수 있다.
빠른 테스트
- 하는 일
- 에이전트가 고칠 때마다 직접 돌린다
- 기록
- LY [1]
에이전트끼리 따지기
- 하는 일
- 한 에이전트의 결과를 다른 에이전트가 검토한다
- 기록
- LY [2]
사람의 최종 판단
- 하는 일
- 소유권과 판단 권한은 그대로 쥔다
- 기록
- LY [2]
리뷰 결과 세기
- 하는 일
- 코멘트 중 실제 수정으로 이어진 비율을 본다
- 기록
- 카카오페이 [3]
| 장치 | 하는 일 | 기록 |
|---|---|---|
| 빠른 테스트 | 에이전트가 고칠 때마다 직접 돌린다 | LY [1] |
| 에이전트끼리 따지기 | 한 에이전트의 결과를 다른 에이전트가 검토한다 | LY [2] |
| 사람의 최종 판단 | 소유권과 판단 권한은 그대로 쥔다 | LY [2] |
| 리뷰 결과 세기 | 코멘트 중 실제 수정으로 이어진 비율을 본다 | 카카오페이 [3] |
사람은 어디에 남나?
판단과 소유권이다. LY 발표 팀은 에이전트 여럿이 단계를 넘겨받는 구조를 만든 뒤 사람의 자리를 이렇게 적었다. "최종 판단은 여전히 사람 엔지니어가 내리지만, 이제 각 단계 간 인수인계를 수동으로 조율할 필요는 없습니다."[2]
빠지는 것과 남는 것을 나눈 문장도 있다. "사람은 중간 단계에서 발생하는 번거로운 세부 조정 및 인수인계 작업에서 벗어나지만, 소유권이나 판단 권한은 그대로 유지합니다."[2]
내 팀에서 바로 해 볼 것은?
위 기록을 바탕으로 한 편집팀 제안이다.
- 1테스트 전체가 몇 초에 끝나는지 잰다. 너무 느리면 AI가 돌리는 범위부터 나눈다
- 2AI에게 코드를 시킬 때 테스트를 돌리고 결과를 같이 보여 달라는 말을 기본으로 붙인다
- 3큰 변경은 다른 모델이나 다른 에이전트에게 반대 입장으로 검토시킨다
- 4리뷰 지적 중 몇 건이 실제 수정으로 이어졌는지 한 달 단위로 센다
- 5머지 버튼은 사람이 누른다
이 글의 근거는 LY와 카카오페이 기술블로그다. AI 도입이 앞선 회사의 기록이라 지금 다니는 팀과는 출발점이 다를 수 있다.
AI가 쓴 결과를 어디서부터 확인할지, 백엔드 문항으로 확인해 보자
백엔드 4분 테스트 하기자주 묻는 질문
- AI가 쓴 코드는 사람이 한 줄씩 다 읽어야 하나?
- LY 사례는 그 대신 AI가 먼저 테스트로 입증하게 하고 사람은 최종 판단을 쥐는 쪽을 택했다. 읽는 양을 줄이는 대신 판단하는 자리를 지켰다.
- 리뷰 코멘트가 많으면 검증이 잘 된 것인가?
- 아니다. 카카오페이 기록에서는 코멘트 188개 중 30건이 코드 수정으로 이어졌다. 코멘트 수보다 실제로 무엇이 고쳐졌는지를 센다.
- 테스트가 느리면 무엇부터 하나?
- LY 팀은 에이전트가 반복할 때마다 테스트를 돌리도록 속도부터 잡았다. 전체를 줄이기 어렵다면 자주 바뀌는 부분의 테스트부터 따로 빠르게 돌리는 방법을 생각해 볼 수 있다.
출처
- 1AI 시대의 개발 능력은 검증력으로 결정된다 LY Tech Blog, 2026.06.25
- 2AI 에이전트끼리 토론한다면? 멀티 에이전트 협업으로 재설계하는 개발 프로세스 LY Tech Blog, 2026.06.25
- 3PR을 더 느리게 만들기 위한 고민 카카오페이 기술블로그, 2026.06.12

