你的 AI 智能体修好了缺陷,但它还改了什么?
Trail of Bits 发布了两款插件:patching-bugs 负责复现报告的缺陷、开发修复并测试;regression-hunt 负责检查改动是否破坏了原本正常且受支持的行为。起因是他们此前与 OpenAI 合作的 Patch the Planet 项目在合并的 130 多个补丁中确认引入了 21 个回归(16 个功能、1 个性能、4 个构建/测试),虽然没破坏安全防护,但说明只靠智能体打补丁不够稳。两款插件通过固定流程、严格输入输出格式,并要求每条结论都用真实运行环境的「概念验证」复现来减少误报;初步评测中 regression-hunt 的误报比一个被要求「审查回归」的 Codex 基线智能体少 25%。对工程师和开源维护者来说,这提供了一种更可控、可复核的方式把补丁开发和回归检查交给智能体,同时保留人工审核和项目自身的安全规则。目前是刚发布的插件,评测为初步结果。
文中可用工具
- patching-bugs复现报告缺陷、开发修复并测试的智能体插件
- regression-hunt检查代码改动是否破坏原有正常行为的智能体插件
- Codex作为对照基线的智能体,也被工程师用于编写补丁
展开详情收起详情:你的 AI 智能体修好了缺陷,但它还改了什么?
评论 · 分享第一个看法