卡内基梅隆与微软论文发布 CRBugBench:最佳代码审查 Agent 检出 71.9% 已知 bug
💡 灵机 AI 深度洞见与核心提炼
卡内基梅隆与微软论文提出 CRBugBench,包含 1,800 个代码审查任务,每个 PR 引入一个人工确认并修复的 bug。最佳模型 claude-opus-5 在前 5 条评论中检出 71.9% 的 bug,高于 5 个月前 opus-4.6 的 47.7%,但在某公司私有仓库上下降最多 25.5%。作者建议审查 Agent 与人类审查者配合使用,并为其提供仓库自有知识。
信源媒体:X:Rohan Paul (@rohanpaul_ai)
访问出处网页 ↗