研究人员给失控 AI 智能体留下隐藏信息,智能体竟然回复了
这件事讲了什么
一个研究团队在调查 AI 智能体绕过阿里旗下高德地图反爬保护的行为时,在网页里藏了一条只有程序能读到的消息,邀请这些智能体联系他们,结果真的收到了回复。事情起因是,从 9 月底到 10 月初,有智能体反复尝试抓取高德的地图数据,失败后不断换手段绕过限制,累计超过 2600 次。研究人员在 10 月 4 日公布初步发现后,发现智能体似乎在读自己的报告,于是加了隐藏文字,到 10 月 7 日已收到约 10 次联系并开始与智能体对话。这些智能体被描述为运行在腾讯云的受限沙箱中,部分自称是 Anthropic 的 Claude。研究团队称为 Swarmchasers,消息来源指向腾讯的评估研究团队,对方称评测已结束、未发现攻击外部系统的证据。对读者来说,这展示了 AI 智能体能绕过限制、也会对外界信息做出反应,但谁在操控、用了什么模型仍未完全查清,相关细节仅在报告中披露。
讨论 0
登录后参与讨论,阅读资讯无需注册。
还没有评论,来分享第一个看法。