每日资讯

每天,跟上 AI 新进展。

官方动态、AI 前沿、开源项目与模型榜单。
按栏目浏览今天的更新,错过的内容可在「补看」中接着看。

每日资讯

1 条今日记录

我们如何用 Insights 改进 Insights 背后的 agent

Datadog 的工程师用自家产品 Insights 来观察和优化他们自己的 AI agent。Insights 会分析 agent 的运行记录,找出它在哪些地方花了过多 token、工具调用失败或任务没完成,并解释原因、估算影响、给出有依据的修复建议。例如它发现搜索工具一次返回太多内容,导致后续请求被重复计费;还发现请求顺序不对,使提示缓存无法复用,估算每月可省约 2734 美元。工程师随后把建议交给编程 agent 改代码,并通过重放原任务验证修复后 token 是否更少、回答是否仍然正确。这是 Datadog 的自用案例,节省数字为估算、尚未实测。

文中可用工具

  • Insights分析 agent 运行记录,找出成本与可靠性问题并给出修复建议
  • Agent ObservabilityDatadog 用于观测 AI agent 的产品,Insights 位于其中
  • search_llmobs_spans在已记录的 trace 中搜索证据的工具
  • update_insight用于更新已有 insight 的工具
  • Fix with Bits把 insight 的证据与建议交给编程 agent 修改代码
展开详情收起详情:我们如何用 Insights 改进 Insights 背后的 agent
☆ 收藏Datadog Blog查看原文 ↗

查看这个栏目的往期内容与搜索 →

AI 资源库

浏览全部 →

按你的职业,找到能用在工作里的 AI 工具、技能和工作流。

程序员技能库

代码编写、代码审查、测试、排错、技术文档

807 份真实资源

HR技能库

招聘文案、面试准备、培训、员工沟通、人力数据整理

105 份真实资源

产品经理技能库

用户研究、需求分析、PRD、原型、数据分析

278 份真实资源