GitHub Blog · AI & ML· Michelle Zhou·· 10 天前精选AI 评分65
GitHub 发布 ReviewBench:开放的 AI 代码审查基准
ReviewBench: An open benchmark for AI code review
AI 导读
GitHub 构建并公开了 ReviewBench,一个面向 AI 代码审查智能体的离线基准。它基于 103.9M 个 GitHub pull request 的语言与仓库规模分布,包含来自 187 个开源仓库的 219 个 PR、覆盖 19 种语言,使用 Claude Sonnet 5 作为判官并公开评测规则,高级工程师独立标注与基准一致率达 96.6%。
推荐理由
GitHub 公开了基准数据集、评测方法与提交入口,读者可据此评估自己的代码审查智能体并横向对比不同系统。
来源:GitHub Blog · AI & ML · github.blog