AI 资源库 · 已整理 2 项

法规

查看与法规相关的 AI 资讯、工具、Skill、工作流和开源项目。

像管理软件发布一样治理AI行为

Harness 公司在一场网络研讨会上提出,AI 行为应该像软件发布一样被管理。以前,团队想换一个提示词或模型,往往要等下一次部署,可能需要好几周。他们的办法是把提示词和模型设置存成“AI 配置”,可以随时在运行时调整,不用重新部署。这样就能小范围试跑、对比效果、出问题一键关停,还能记录谁改了什么。对做 AI 功能的团队来说,改起来更快也更安全。

文中可用工具

  • Harness用于治理 AI 配置和发布的平台,支持渐进发布、实验和审计日志
  • Jira配置上线前需要关联的工单,用于策略检查
☆ 收藏查看来源 ↗

AI 评估师:史上最重要的 AI 工作?开发者如何胜任这一新岗位

Anthropic CEO Dario Amodei 发表文章,提议每一家前沿 AI 公司都应允许一个第三方评估团队以“类似正式员工”的权限进入公司,检查安全措施是否真正落实,并上报问题。背景是有人担心 AI 发展太快可能带来失控风险。目前 METR 等机构已在招聘这类评估师,年薪最高约 68.7 万美元,要求能独立做失控风险建模、审查训练过程和提示词;Mercor 也有类似岗位,年薪 18 万到 30 万美元,要求博士或硕士加两年以上相关经验。对读者来说,这代表 AI 安全和评估可能成为一类高薪新职业,但该做法能否真正独立监督大公司、以及小机构能否负担,都还没有明确答案。

文中可用工具

  • METR第三方 AI 评估机构,负责核查前沿 AI 公司的安全实践并报告问题
  • MercorAI 模型训练公司,也招聘类似评估岗位
☆ 收藏查看来源 ↗