← 返回列表

AI顶级编程智能体在私有代码库基准测试中失败率超60%

The New Stack原文发布 2026-09-15 06:22首次收录 2026-09-15上架 2026-09-15 07:21

☆ 收藏查看原文 ↗

这件事讲了什么

Y Combinator投资的Specific Labs推出新基准Real-SWE,将编程智能体投入真实企业的私有代码库进行测试。Claude Fable 5.1以38.8%的成功率领先,但整体失败率仍超60%;单任务成功率更低,六项任务不足15%,有一项在64次尝试中无人解决。
这是基于来源内容整理的摘要。原文链接失效后,本页摘要和讨论仍会保留。

讨论 0

登录后参与讨论,阅读资讯无需注册。

还没有评论,来分享第一个看法。