Agent 与工作流01
LangSmith 的 Managed Deep Agents 现在能替你的 Agent 运行浏览器,让 Agent 像人一样点击、滚动和填表,去做那些没有 API 可用的网页操作,比如订机票或提交理赔。原来 Agent 只能抓网页源码,Java渲染出来的内容和按钮它都碰不到。这次提供了几种配套工具,还能在需要登录时把浏览器交给你本人操作,登录状态可以沿用。对读者来说,以后让 Agent 代办网页事务会更顺手,也不必把密码交给模型。
文中可用工具
- Managed Deep Agents在 LangSmith 里构建和部署 Agent,无需自己运维基础设施
- LangSmith运行 Agent 的托管平台,也用于查看和调试运行记录
- browser_snapshot读取页面结构并给可交互元素标上编号
- browser_run在页面上执行点击、填写等操作或一段脚本
- browser_screenshot截取渲染后的页面画面
- browser_handoff把浏览器交给真人操作,完成后再交还 Agent
- StagehandBrowserbase 开源的浏览器 Agent 开发 SDK,这些工具基于它构建
- WebVoyager用于测试浏览器 Agent 在真实网站上完成日常任务的基准
- Open SWE用浏览器做端到端测试的编程 Agent
Agent 与工作流02
LangChain 推出了 LangSmith LLM Gateway,目前处于公开测试阶段。它解决的是生产环境智能体的一个麻烦:智能体调用模型时可能因重试失控产生高额账单,或遇到模型服务商宕机就报错。这个网关夹在智能体和模型之间,统一执行花费上限、速率限制、模型回退和敏感信息(如个人隐私、密钥)脱敏,不用在每个智能体里各写一遍,也不必绑定某一家供应商。工程师可以在组织、工作区、API 密钥、用户四个层级设限额;敏感信息脱敏功能目前只对 Enterprise 套餐开放。
文中可用工具
- LangSmith LLM Gateway居中管理智能体模型调用的花费、限速、回退与脱敏的网关服务,现为公开测试
- LangSmith记录网关事件与调用链路追踪的平台
- Fireworks为开放权重模型提供快速推理,并通过网关提供托管推理
Agent 与工作流03
LangChain 团队基于 LangSmith 平台的经验,整理了 Agent 评测的常见问题。传统软件测试靠精确匹配,但 Agent 每次输出会变、正确答案不止一个、执行路径还可能绕弯,所以需要评测来打分。文章建议先从一条关心的行为入手,用真实 trace 建 10 到 20 条小数据集跑个基线,上线前用离线评测、上线后用在线评测,并优先用代码评测器、其次 LLM 评委、再用人工复核;多步 Agent 要评整条线程和最终状态。文中还提到 Terminal-Bench 这类基准和 Harbor 工具。
文中可用工具
- LangSmithLangChain 的 Agent 工程平台,用于记录 trace、建数据集、跑实验和查看评测分数
- Terminal-Bench由较长任务和独立环境组成的离线评测基准,用于比较不同 Agent、模型或版本
- Harbor用来运行 Terminal-Bench 等基准,并把结果记录到 LangSmith 实验中
Agent 与工作流04
LangChain 在纽约和伦敦的 Interrupt 活动上集中发布了一批新功能,主要围绕让企业“拥有自己的智能”——也就是自己掌控模型、运行框架和业务上下文。过去团队做 AI 智能体时,调试、评测和上线往往靠零散工具,出了问题很难定位,也很难持续改进;这次的新版本把搜索、监控、轨迹查看、微调和托管智能体等能力整合进 LangSmith 和 LangChain。比如 AI 搜索可以用自然语言问“用户是否不耐烦”,自动找相关对话;Engine v2 能在上线前用红队测试发现问题并自验证修复;Managed Deep Agents v0.9 支持有记忆、会用工具、按计划执行任务的智能体。另有一些线上活动和社区聚会,部分内容需注册参加,具体发布状态与可用范围原文未逐一说明。
文中可用工具
- LangSmith AI Search用自然语言语义搜索对话记录,查找如用户受挫或 PII 泄露等问题
- Managed Deep Agents v0.9构建有用户级记忆、会用工具、能定时任务并能在 Slack 响应的个性化智能体
- LangSmith Engine v2上线前用红队测试发现潜在问题,并自动测试和验证修复方案
- LangSmith Trajectories按时间线查看智能体及子智能体的会话轨迹数据
- LangSmith Custom Apps在 LangSmith 内构建、发布并运行自定义界面,把重复流程变成共享工具
- LangSmith Fine-Tuning把生产轨迹转成训练数据,用 Baseten 或 Fireworks 微调并评估部署模型
- LangChain v1.4.0通过 langchain.mcp 命名空间支持 FastMCP
- LangGraph编排 Jev(TypeSafe AI 的决策模型),构建运行更快更省成本的智能体
- Deep Agents开源智能体运行框架,帮助保持上下文窗口精简
Agent 与工作流05
Snyk 是一家做代码和云安全扫描的公司,它把原本只给自己客服团队用的一个 AI 助手,升级成了所有付费客户都能用的功能,叫 Snyk Assist。以前客户想问漏洞、账号或产品问题,得自己翻文档、文章和发布说明,或者提工单等回复,信息散落各处。这个助手用 LangChain、LangGraph 和 LangSmith 搭建,能用大白话回答并帮忙查漏洞、开工单、提需求,而且只会看到当前用户本来就有权查看的内容。它先内部试用了约一年,2026 年 4 月进入支持门户,9 月 1 日才放进核心产品,所以目前是已经可用的状态。对读者来说,问问题不用再等人工,也能在对话里直接完成一些操作。
文中可用工具
- LangChain搭建 AI 智能体的开发框架,提供社区和生态支持
- LangGraph运行智能体的单一运行时,支撑多个入口
- LangSmith观测和评估智能体表现,帮助发现退化、改进回答
- Snyk Assist面向付费客户的对话式 AI 助手,可回答问题并代用户操作
- SlackSnyk Assist 的一个使用入口(Slack 应用)
Agent 与工作流06
LangChain 更新了 LangSmith 平台。这次带来四件事:Engine v2 能主动找代理问题,包括自动红队测试和自动验证修复方案;托管式 Deep Agents 升级到 v0.8,新增按用户隔离的认证与记忆、Slack 文件传输、通用 HTTP 接入和内置网页搜索;Trajectories 把冗长的代理会话整理成对话视图,方便排查;微调功能则把这些会话数据变成训练素材,用于定制模型,还支持搭建自定义界面。主要面向正在把 AI 代理投入生产的团队,目前具体定价和正式开放程度原文未说明。
文中可用工具
- LangSmith Engine v2自动检测 AI 代理问题、测试修复方案并生成待部署的补丁
- Managed Deep Agents v0.8带托管基础设施的代理运行时,新增用户级记忆、认证和频道支持
- LangSmith Trajectories把代理会话和追踪数据整理成按时间排列的对话视图,便于调试
- LangSmith Fine-Tuning利用代理会话数据微调模型,适应专门任务
- Custom Apps让团队为 LangSmith 数据搭建并发布自定义界面
- Parallel为托管代理提供内置网页搜索能力
- Slack作为代理频道,支持发送日志、表格、合同等文件
- HTTP channel把代理接到任何能发 JSON webhook 的服务
- GitHub文中仅提及作为外部连接示例,原文未说明具体用途
- Notion文中仅提及作为外部连接示例,原文未说明具体用途
训练与微调07
langchain-ai/smithtune · LangSmith Post-Training CLI
smithtune 是 LangChain 推出的后训练 CLI 工具(早期 beta),用于将 LangSmith 中记录的 agent 轨迹整理为数据集,并借助 Fireworks 或 Baseten 进行模型微调。它覆盖从轨迹拉取、数据集筛选与可选的多模型评审(agent council),到数据准备、训练、基于 judge 的基础模型与微调模型对比评测,以及在 Fireworks 或 Baseten 上部署推理端点的完整流程,并提供可供编码 agent 使用的 smithtune skill。训练、评测和部署会产生提供商费用,命令与目录格式可能在版本间变化,README 未说明具体硬件、成本与免费/商用授权条件。
工具与应用08
LangSmith 推出了 Custom Apps 功能,让团队能在 LangSmith 里直接搭建、发布并使用自定义界面来查看自己的 Agent 数据。过去,很多团队为了按自己的评审流程看数据,得另外写一套前端,还要自己处理托管、登录和权限,维护起来很麻烦。现在可以直接用模板或让 LangSmith Chat 根据一句话描述生成应用,也能用编码助手基于 API 自己写,发布后同事就能在同一处查看。对常做人工标注、实验对比或追踪审查的团队来说,省去了导出数据和重复搭界面的工作。该功能已在 Plus 和 Enterprise 套餐开放,配套的 Macaw 设计系统也已开源。
文中可用工具
- LangSmith用于调试、评估和改进 AI Agent 的平台,Custom Apps 即运行于其中
- Custom Apps在 LangSmith 内构建、发布和运行自定义界面的新功能
- LangSmith Chat用一句话描述数据和展示方式,自动生成可用的自定义应用
- LangSmith API让开发者用自己的编码助手基于数据构建自定义界面
- MacawLangSmith 的开源设计系统,为自定义应用提供默认外观
Agent 与工作流09
LangSmith 新上线了一个叫 Trajectories 的功能,它能把一个 AI 智能体在一次长时间会话里做过的事,按发生顺序整理成一段像聊天记录一样的清晰视图,而不是一堆嵌套的复杂执行细节。以前调试这类智能体,得在层层嵌套的运行记录里翻找,很难快速看出它到底哪里做错了。现在可以先按顺序浏览整个会话,找到出问题的步骤,再点进去看完整细节,还能让非工程背景的专家直接用这个视图打分、挑毛病,并把有用的会话存成训练数据。对做智能体开发和运维的人来说,调试和人工审核都会更快、更省事。
文中可用工具
- LangSmith用于查看、评估和改进 AI 智能体运行情况的平台,本次新增 Trajectories 视图
- LangChain开发 AI 应用的框架,其产生的运行记录可直接使用 Trajectories
- LangGraph构建有状态 AI 智能体的框架,其运行记录可直接使用 Trajectories
- Deep Agents构建深度智能体的框架,其运行记录可直接使用 Trajectories
- OpenAI Agent SDKOpenAI 提供的智能体开发工具包,其运行记录可直接使用 Trajectories
- Claude Agent SDKClaude 提供的智能体开发工具包,其运行记录可直接使用 Trajectories
- CodexOpenAI 的编程智能体,其运行记录可直接使用 Trajectories
- Claude CodeClaude 的编程智能体,其运行记录可直接使用 Trajectories
- CursorAI 编程工具,其运行记录可直接使用 Trajectories
工具与应用10
LangChain 这次推出了 LangSmith Fine-Tuning 和一个叫 smithtune 的命令行工具,让团队能把智能体在 LangSmith 里跑出来的操作记录,直接变成训练数据,再拿去训练自己专用的模型。以前做这件事得手动搭整套数据流程,很麻烦。现在 smithtune 把造数据集、用 Fireworks 或 Baseten 训练、再用 LangSmith 评测串成一条龙,还支持让编程智能体来跑。目前只支持监督微调(SFT),需要去 GitHub 安装使用。
文中可用工具
- LangSmith Fine-Tuning把智能体的运行记录变成训练数据并微调模型的整套服务
- smithtune一个命令行工具,负责从 LangSmith 拉数据、准备训练集、提交训练和评测
- Fireworks合作方,提供托管的监督微调训练服务
- Baseten合作方,其 Loops 提供托管训练基础设施
- LangSmith存放智能体运行轨迹和评测结果,并管理数据集
工具与应用11
这篇文章讲的是:做医疗 AI 产品的团队(如 Abridge 和 Included Health)用 LangSmith 这个工具,把医生的专业审核变成可以重复使用的评测数据、评测标准和上线把关流程。原来问题是,AI 生成的病历或分诊建议对不对劲,只有医生能判断,但医生时间有限,每次都从头审核根本忙不过来。现在他们把医生的判断记录下来、做成自动化测试,以后每次发布新版本都能复用,不必重新找人审。结果 Abridge 的发布周期从一两个月缩短到几天,Included Health 上线后聊天互动增加 75%,高风险情况识别率超过 99%。不过文中也提到医疗数据隐私(PHI)、判断标准不唯一等挑战,另有部分内容被截断,具体实现细节未完全说明。
文中可用工具
- LangSmith把专家审核变成可复用的评测器、数据集和发布闸门,用于评测和监控 AI 系统
- LangGraph用于构建 Included Health 的 AI 导诊助手 Dot
- Deep Agents原文未说明具体用途,仅提到 Dot 由 LangGraph 和 Deep Agents 驱动