跳到正文
原文
GitHub Blog · AI & ML· Michelle Zhou·· 28 天前精选AI 评分52

GitHub 发布 ReviewBench:面向 AI 代码审查的开放基准

ReviewBench: An open benchmark for AI code review

AI 导读

GitHub 发布 ReviewBench,一个面向 AI 代码审查智能体的开放离线基准,研究预览版已上线官网。基准基于 1.039 亿个 GitHub pull request 的分布构建,包含 19 种语言、187 个开源仓库的 219 个 pull request,采用多来源 golden set 与统一评分标准,发布前由资深工程师独立复核,一致率 96.6%。

推荐理由

GitHub 公开了代码审查基准的构建方法与评测口径,读者可据此判断自家审查智能体的强弱与取舍。

来源:GitHub Blog · AI & ML · github.blog