Published on

이해가 새로운 병목이다 — AI 에이전트의 대규모 PR을 리뷰하는 법

Authors
  • avatar
    Name
    junyeol kim

에이전트가 5만 5천 줄짜리 PR을 올렸다는 유튜브 영상을 보다가, 원 출처인 Notion 디자인 엔지니어 Geoffrey Litt의 AI Engineer 컨퍼런스(2026년 7월) 발표까지 찾아서 정리해봤습니다. 지난번에 쓴 AI 코드 리뷰 검증 격차 글과 이어지는 내용이라 더 흥미로웠어요.

📊 숫자로 보는 병목 이동

2026년 나온 두 개의 대규모 리포트가 같은 현상을 다른 각도에서 보여줍니다.

LinearB 2026 Software Engineering Benchmarks Report (8.1M PR, 4,800개 팀, 42개국 분석)

지표수치
AI PR이 리뷰 시작되기까지 대기 시간사람 PR보다 4.6배 오래 걸림
일단 픽업된 후 리뷰 속도사람 PR보다 2배 빠름
AI 생성 PR 승인율32.7% (사람 PR은 84.4%)

CircleCI 2026 State of Software Delivery Report (2,800만 CI 워크플로우, 22,000개 조직 분석)

지표수치
피처 브랜치 처리량 (YoY)+59% (역대 최대 증가폭)
메인 브랜치 처리량 (median team)-7%
빌드 성공률70.8% (5년 내 최저)

두 리포트를 합쳐 읽으면 그림이 명확해집니다. 코드는 순식간에 만들어지는데, 그걸 리뷰할 사람 앞에서 줄을 서서 오래 기다립니다. 일단 리뷰가 시작되면 오히려 빨리 끝나버리는데(승인율이 낮다는 건 대충 훑고 반려한다는 뜻이기도 함), 정작 병목은 "리뷰 시작 전 대기열"과 "머지 이후 메인 브랜치 안정성"에 몰려있습니다.

🤔 진짜 병목은 "정확성"이 아니라 "이해"

Litt의 핵심 주장은 이렇습니다. 시니어 엔지니어의 일은 원래 "이게 맞나?"에 답하는 것이었고, 이 "맞다"에는 여러 층위가 있습니다 — 동작하는가, 유지보수 가능한가, 제품 방향에 맞는가, 의도와 일치하는가.

문제는 에이전트가 사람이 읽는 속도보다 훨씬 빠르게 코드를 쏟아낸다는 겁니다. 5만 줄짜리 PR을 한 줄씩 읽는 건 애초에 불가능한 방식이고, 그렇다고 새로운 관행 없이 그냥 넘어가면 리뷰어는 진짜 참여자가 아니라 **그냥 도장 찍는 사람(rubber stamp)**이 되어버립니다. LinearB 데이터의 낮은 승인율(32.7%)이 사실 이 "도장 찍기 vs 대충 반려" 사이 어딘가에서 벌어지는 일일 수 있습니다.

💡 Litt가 제안하는 3가지 해법

1. 설명(Explanations) — 에이전트가 "무엇을 왜 했는지"를 같은 PR 안에 남기게 합니다. 기계적인 변경 로그가 아니라 추론 과정 자체를 씁니다. Litt가 든 비디오 편집 프로젝트 예시에서는, PR에 좌표계 규칙과 Z-레이어 시맨틱, 어떤 불변식을 지켰는지 설명하는 산문 섹션이 포함되고, 리뷰어는 모든 줄을 읽는 대신 그 설명이 코드와 실제로 맞는지만 확인합니다.

2. 직관(Intuition) — 슬라이더, 타임라인 스크러버, 시뮬레이션 같은 인터랙티브 플레이그라운드로 코드의 동작을 "느껴볼" 수 있게 합니다. 기본적인 질문에 답하지 못하는 "퀴즈 순간"이 바로 더 깊이 파고들어야 한다는 신호가 됩니다.

3. 공유된 공간(Shared spaces) — 에이전트와 사람이 같은 맥락(문서, 디자인 스케치, 의사결정 스레드)을 공유해야 이해가 팀 안에서 흩어지지 않습니다. Litt의 팀에서는 Claude가 만든 계획이 Notion 문서로 나타나고, 팀원들이 그 위에 인라인 코멘트를 달고 가정에 대해 토론합니다.

Litt는 이걸 AI가 사람을 대체하는 위협이 아니라, Engelbart의 "인간 지능 증강(augmenting human intellect)" 프레임으로 봅니다 — 사람을 걷어내는 게 아니라 사람-AI 루프를 더 깊게, 더 눈에 보이게(legible) 만드는 작업이라는 거죠.

📚 정리

  • 코드 생성 속도와 리뷰 착수 속도의 격차가 병목의 실체 — AI PR은 픽업까지 4.6배 오래 기다림
  • 메인 브랜치 처리량은 오히려 감소(-7%), 빌드 성공률은 5년 내 최저(70.8%) — 생산량 증가가 안정성으로 이어지지 않음
  • 한 줄씩 읽는 리뷰는 스케일이 안 됨 — 진짜 병목은 "정확한가"가 아니라 "이해할 수 있는가"
  • 해법은 설명·직관·공유된 맥락 — 에이전트가 추론 과정을 남기고, 사람은 그걸 검증하는 역할로 이동

참고: 유튜브 영상, Sparse Notes 「Understanding Is the New Bottleneck」, byteiota 「LinearB 2026 Benchmarks」, freeCodeCamp 「AI PR Review Bottleneck