跳到正文
原文
GitHub Blog · AI & ML· Michelle Zhou·· 10 天前精选AI 评分65

GitHub 发布 ReviewBench:开放的 AI 代码审查基准

ReviewBench: An open benchmark for AI code review

AI 导读

GitHub 构建并公开了 ReviewBench,一个面向 AI 代码审查智能体的离线基准。它基于 103.9M 个 GitHub pull request 的语言与仓库规模分布,包含来自 187 个开源仓库的 219 个 PR、覆盖 19 种语言,使用 Claude Sonnet 5 作为判官并公开评测规则,高级工程师独立标注与基准一致率达 96.6%。

推荐理由

GitHub 公开了基准数据集、评测方法与提交入口,读者可据此评估自己的代码审查智能体并横向对比不同系统。

来源:GitHub Blog · AI & ML · github.blog