BENCHMARK (벤치마크)발표 2026.10.05
GitHub, AI 코드리뷰 성능 재는 'ReviewBench' 공개… 실제 PR 219건으로 평가
GitHub이 AI 코드리뷰 에이전트의 성능을 비교하는 공개 벤치마크 ReviewBench를 연구 프리뷰로 공개했습니다. 187개 공개 오픈소스 저장소의 Pull Request 219건, 19개 프로그래밍 언어로 평가 세트를 만들고, 문제를 찾는 능력과 불필요한 지적을 줄이는 능력을 precision·recall 계열 지표로 나눠 봅니다.
왜 봐야 하나AI 코드리뷰가 개발 과정에 들어올수록 'AI가 리뷰해 준다'보다 '그 리뷰를 얼마나 믿을 수 있나'가 중요해집니다. 다만 GitHub이 직접 만든 평가 체계라는 점은 감안해야 합니다.
자세히 보기 →