VulnBump:AI 智能体能修复有漏洞的依赖而不弄坏构建吗?
这件事讲了什么
Snyk 发布了一个叫 VulnBump 的新测试基准,用来考察 AI 智能体能不能把项目里有漏洞的第三方依赖升级到安全版本。以前升级依赖很难:多数有漏洞的包是被间接引入的,约四分之一修复需要跨大版本,连小版本升级也常导致构建失败,所以虽然 94% 的漏洞都有已知修复版本,实际只有约 10% 被解决。VulnBump 用 307 个真实升级任务来考智能体,只有漏洞消失、项目仍能安装、构建并通过测试才算通过。结果显示:同一个 Claude Sonnet 5.5 模型,配上 Snyk 数据后通过率能提高约 18 个百分点,而 Snyk 专用智能体通过率达到 90.2%。对开发者的用处是:想安全修漏洞,光靠通用 AI 不够,还要有准确的升级建议和扫描验证。
可以使用的工具
文中可用工具
- VulnBumpSnyk 发布的测试基准,用真实项目评估 AI 智能体升级有漏洞依赖的能力
- Evo Remediation AgentSnyk 的专用修复智能体,能自动扫描、构建、测试并修复升级错误
- Claude CodeAnthropic 的通用编程智能体,在测试中尝试升级有漏洞的依赖
- Snyk Open SourceSnyk 的开源漏洞扫描工具,用于发现依赖漏洞并验证修复结果
讨论 0
登录后参与讨论,阅读资讯无需注册。
还没有评论,来分享第一个看法。