跳到正文
GitHub Blog · AI & ML· Michelle Zhou·· 4 天前AI 评分48

GitHub 发布开源代码审查基准 ReviewBench,覆盖 219 个真实 PR

ReviewBench: An open benchmark for AI code review

AI 导读

GitHub 发布开源代码审查基准 ReviewBench,含 219 个跨 19 种语言的公开 PR,与 1.039 亿个 GitHub 真实 PR 对齐分布。它通过人类评审、前端 frontier LLM 与静态分析构建多源 golden set,由资深工程师独立标注并达 96.6% 一致率。该基准已用于 Copilot 代码审查(CCR)的离线评估,并被验证其离线指标变化方向与线上实验一致。

来源:GitHub Blog · AI & ML · github.blog