工具与应用01
Datadog 宣布自己在 Forrester 的 AIOps 平台评测里被评为“领导者”。以前工程师要自己翻告警、查问题、找根因;现在 Datadog 的 Bits AI 会帮忙定位问题并给出修复建议,还能在设定的护栏内执行修复,工程师保留最终控制权。支撑它的 Scout 1.0 模型刚进入预览,Bits AI 已有超过 1 万名付费客户。对读者来说,这意味着运维排障可能从“人工逐条查”变成“AI 先查、人来把关”,但 Scout 1.0 尚未正式开放。
文中可用工具
- Bits AI自动发现生产问题、调查根因并建议或执行修复
- Scout 1.0专为调查生产问题打造的模型,目前处于预览阶段
工具与应用02
Datadog 推出了一个叫 Infrastructure Basic 的轻量监控档位。原来,对于不太重要的服务器(比如内部后台系统、开发测试机),团队要么用比实际需要更重的监控方案,要么另买一套工具,要么干脆不监控、留下盲区。现在这个档位只采集 CPU、内存、磁盘、网络、开机时长等基础系统指标,还能盯住指定进程是否在跑,并复用现有的告警通知工具。这样,次要服务器也能和重要系统放在同一个 Datadog 环境里统一查看,减少监控空档。目前该功能需要联系 Datadog 销售团队开通,新用户可先试用 14 天。
文中可用工具
- Datadog Infrastructure Basic轻量级主机监控档位,采集核心系统指标和指定进程状态,支持告警通知集成
- Datadog Agent部署在主机上的采集组件,在 basic 模式下只采集基础系统级数据
- Process Check监控指定的命名进程是否仍在运行
- ServiceNow接收监控告警并创建工单
- PagerDuty接收监控告警并触发事件通知
工具与应用03
Datadog 宣布支持通过其 AWS、Azure 和 Google Cloud 集成中的专用子集成来监控 Oracle AI Database@AWS、@Azure 和 @Google Cloud。过去,数据库托管在 Oracle 云上而应用跑在其他云里,出问题时常出现监控盲区,难以判断是应用还是数据库的锅;迁移后性能验证和跨账单的成本归属也很麻烦。现在每套子集成提供 50 多项开箱即用的指标和仪表盘,还能配合数据库监控(DBM)、应用性能监控(APM)和云成本管理(CCM)排查慢查询、对比迁移前后性能,并把 OCI 与云厂商的账单归一化后按团队归因成本。原文未说明具体上线时间或收费方式,以上能力均以已发布的产品功能形式介绍。
文中可用工具
- Datadog监控平台,提供指标、仪表盘和调查工具
- Datadog Database Monitoring (DBM)采集数据库负载指标、查询样本和执行计划,排查慢查询根因
- Datadog APM把应用请求与数据库查询关联起来,追踪请求链路
- Datadog Cloud Cost Management (CCM)汇总并归一化云与 OCI 成本,按团队归因花费
- Bits Chat结合指标、查询和日志自动定位性能问题并给出修复建议
- Oracle AI Database@AWS在 AWS 上运行的 Oracle 数据库服务
- Oracle AI Database@Azure在 Azure 上运行的 Oracle 数据库服务
- Oracle AI Database@Google Cloud在 Google Cloud 上运行的 Oracle 数据库服务
- Oracle Cloud Infrastructure (OCI)Oracle 的云平台,托管这些数据库并提供成本数据
工具与应用04
很多团队现在直接用 AI 写代码,Anthropic 的工程师产出的代码量达到原来的八倍,有人每月提交数千个 PR。但麻烦在于:代码写得快了,测试仍然要靠人写,得决定测哪些流程、写脚本、流程一变还要改,瓶颈从写代码挪到了测试环节。Datadog 今年收购了 Propolis,把“由智能体写的测试”加进自家平台:智能体自己去探索应用、走用户流程,再根据自然语言的要求生成测试,并结合 Datadog 的日志和链路追踪来检查性能,避免硬编码测试容易失效的问题。对团队来说,这有望缩短开发周期;不过目前只是文章介绍的方案,具体能否用、怎么用还要看 11 月 4 日的线上活动。
文中可用工具
- Propolis被 Datadog 收购,用智能体探索应用并按自然语言生成测试
- Datadog提供可观测性平台,结合日志和链路追踪辅助测试与性能检查
工具与应用05
Datadog 的产品经理 Kathy Lin 和技术作者 David Lentz 写了一篇文章,讲 Kubernetes 的旧设备插件模型怎么限制 GPU 使用效率。旧模型里,团队必须提前把 GPU 切好固定的分区,请求只能写数量、看不出显存大小和连接方式,结果经常是花钱买的 GPU 容量白白闲着,或者任务排队等资源。新的动态资源分配(DRA)让 Kubernetes 按每个任务的具体需求灵活挑选和分配 GPU,还能让多个任务共用同一块 GPU,把闲置容量利用起来。读者可以了解 DRA 相比旧模型好在哪,以及用 Datadog 怎么跟踪这些改进和省下的成本。文章目前是博文介绍,没有给出具体性能数字,也没有说明 DRA 功能是否已普遍可用。
文中可用工具
- Kubernetes Dynamic Resource Allocation按任务需求动态挑选和分配 GPU 等硬件,提升利用率
- Kubernetes device plugin model旧版 GPU 分配方式,把设备当作可互换的数量单位
- NVIDIA Multi-Instance GPU把一块 GPU 切成多个相互隔离的硬件实例
- Datadog跟踪 GPU 利用率改进和成本节省情况
工具与应用06
Datadog 为它的 RUM(真实用户监控)产品加了一个叫“运维监控”的新功能。以前,团队能单独看到页面浏览、点击、报错这些零散事件,但很难直接回答“付款这一步到底成没成功、花了多久”。现在,你可以把“处理支付”这类由应用控制的关键步骤定义成一个“操作”,单独追踪它的成功率和耗时,还能用 SLO 设目标、用 Bits AI 查为什么变慢或报错,最后再把它放回整条用户旅程里看。这个功能随 RUM 免费提供,Bits Investigation for Operations 目前还在预览阶段。
文中可用工具
- Datadog Real User Monitoring (RUM)采集真实用户在使用应用时产生的浏览、操作、资源和错误等详细事件数据。
- Datadog MCP Server在不改动应用代码的情况下,通过 MCP 兼容的工作流来创建操作。
- RUM Operations API用编程或批量方式创建操作。
- Bits Investigation for Operations自动分析操作性能下降相关的信号,帮助排查原因,目前处于预览阶段。
行业动态07
Datadog 内部有数千个服务,以前对所有服务一视同仁地制定部署和可靠性标准,规模变大后成本太高,也不知道该把有限的可靠性投入放在哪里。他们用大语言模型读取几百篇最高严重级别的故障复盘文档,提取出哪些服务导致或被卷入事故,再结合 APM/RUM 错误链、生产流量和监控告警等信号,给每个服务打出高、低、未知的关键性等级和置信度。这样就能对真正关键的服务严格部署、收紧可靠性目标,对不关键的服务放宽标准,把精力集中在故障时最影响客户的地方。
文中可用工具
- Datadog APM应用性能监控,用错误链数据判断服务是否在关键错误路径上
- Datadog RUM真实用户监控,帮助连接入口到关键用户旅程
- Software Catalog用于校验模型提取出的服务名是否映射到真实服务,也用于统计生产流量
- Datadog On-Call判断服务的监控是否通知值班轮换,作为关键性信号之一
工具与应用08
Datadog 在自带云(BYOC)日志功能里加了跨集群查询。有些公司因为数据必须留在本地或某些地区,就把日志分散存放在自己控制的多个 Kubernetes 集群里。以前要查一次故障,得挨个集群重复搜索再手动对比。现在用一条查询就能同时搜索多个选定集群,Datadog 会把各集群的结果合并展示,日志本身仍留在原处。团队和 AI 智能体因此能更快判断问题是局部还是全球性的,智能体还能少发几次工具调用、省一些 token。该功能已在 BYOC 日志中可用,具体哪些集群可查文中未说明。
文中可用工具
- Datadog BYOC把 Datadog 平台部署到用户自己控制的云环境里,日志数据保留在本地
- Log Explorer用来搜索和查看日志的界面,跨集群查询的结果会合并显示在这里
- Bits AIDatadog 的 AI 功能,BYOC 部署中可继续使用,原文未说明具体用途
- MCP Server让 AI 智能体通过 search_datadog_logs 工具查询 BYOC 日志
- search_datadog_logsAI 智能体用来搜索 Datadog 日志的工具,可指定索引、过滤条件和时间范围
工具与应用09
Datadog 的政府版服务最近拿到了 FedRAMP High 认证,这意味着处理最敏感政府数据的团队,现在也能用 Datadog 来做事件响应了。以前,政府系统的告警、日志、截图等敏感信息,可能不敢放在认证环境里,事件处理会缺东少西。现在,值班呼叫、协调沟通、自动化处理、复盘等一整套流程,都能在 US1-FED 这个认证环境里完成,还能跟现有监控工具配合。对政府用户来说,好处是事件数据不用再挪出安全区,响应过程更完整,也更容易通过审计。文章说它是目前唯一有此认证的事件响应平台,但具体怎么开通、价格多少,原文没说明。
文中可用工具
- Datadog Incident Response在政府认证环境里做值班呼叫、事件协调、自动化处理和复盘
- Datadog On-Call自动呼叫负责出故障服务的值班团队,支持排班、升级和手机响应
- Slack在团队日常用的聊天工具里协调事件、发布更新
- Microsoft Teams在团队日常用的聊天工具里协调事件、发布更新
- Datadog Workflow Automation自动执行重复的响应步骤,比如收集信息、跑修复流程、建工单
- Jira把事件后续要做的任务导出到工作管理系统
- Datadog Synthetic Monitoring验证关键用户流程是否已经恢复正常
- Catalog管理服务归属信息,让升级逻辑跟上团队和服务的变化
工具与应用10
Datadog 推出了可视化标注工具(Visual Labeler),让产品经理不用写代码就能给网页上的点击、点击等交互起名字。以前,自动采集到的操作名只描述页面元素本身,看不出用户真正想干什么,比如“开始结账”这种业务问题往往要工程师写代码或加自定义事件才能回答。现在你只需打开浏览器扩展,在自家网站上点选元素并命名,Datadog 就会把这个名字补用到留存期内已经记录的所有匹配交互上,历史趋势和漏斗当天就能用。标好的操作还能作为共享事件在漏斗分析、热力图和仪表盘中重复使用,减少不同分析师对同一行为各叫各名字的麻烦。
文中可用工具
- Datadog Product Analytics分析用户在网页上的行为,比如看有多少人开始结账
- Visual Labeler不用写代码,在网页上点选元素并给它起一个反映用户意图的名字
- Datadog Action Management集中定义和查找已标注的用户操作
- Datadog RUM原文未说明具体用途,仅提到共用同一套 SDK 和配置
- Datadog test recorder Chrome extension在浏览器中导航网站并选择要标注的元素
- Datadog Heatmaps把页面上的交互聚合成点击图,看哪些元素被点得最多
- Funnel Analysis用标注好的操作搭建漏斗,看用户从一步走到下一步的转化情况
- Notebooks共享漏斗图表,和团队一起看转化数据
- Error Tracking排查可能影响转化的报错
- Session Replay回放用户会话,了解漏斗流失时的具体情况
工具与应用11
Datadog 原有远程漏洞扫描器在主机规模扩大后,扫描全部主机需超过18小时,而扫描器的 SSH 凭证只有12小时有效期,凭证过期后无法继续认证剩余主机,导致部分主机漏扫。他们改用已经部署在各主机上的 Datadog Agent 收集安装的软件包版本,传给 Datadog Cloud Security 来识别已知漏洞,并用六个月新旧系统并行比对覆盖范围和检测结果。迁移后扫描新鲜度保持在99%以上,即99%以上范围内主机在过去24小时内完成过扫描,并继续满足 SOC 2 Type II、ISO 27001、PCI DSS 和 FedRAMP High 的审计要求。
文中可用工具
- Datadog Agent已部署在各主机上的采集程序,用来收集安装的软件包及其版本信息,并发送给 Datadog
- Datadog Cloud Security基于 Agent 收集的软件包信息识别已知漏洞,并成为主机漏洞发现结果的记录系统
工具与应用12
Datadog 推出 CI/CD Optimization,帮助平台和 DevOps 团队应对 AI 辅助开发带来的 CI 压力。AI 让代码产出变多,但流水线跑不完、测试结果不稳定、算力开销水涨船高,交付反而变慢。这个产品把流水线和测试数据与提交记录、日志、运行器及基础设施信息放在一起,帮团队找出瓶颈、自动重试不稳定的测试、只运行受改动影响的测试。对读者来说,这意味着查看合并请求的等待时间可能缩短,CI 账单也不会随代码量同步膨胀。文中提到 Betterment 把平均构建时间从近 40 分钟降到 10 分钟以内,The Browser Company 把 CI 流水线时间缩短了 50%。
文中可用工具
- Datadog CI/CD Optimization把 CI 流水线和测试数据与提交、日志、运行器等信息结合起来,帮助团队缩短反馈时间、减少不稳定测试影响并控制算力成本
- Flaky Management集中展示不稳定的测试及它们造成的流水线失败、浪费的 CI 时间和失败率,帮助团队优先处理最耗时的失败
- Auto Test Retries对失败的测试自动重试,直到通过或达到可配置的上限,避免偶发失败拖垮整个构建
- Early Flake Detection在新出现的不稳定测试进入默认分支前进行检测和拦截
- PR Gates在修复进行期间阻止已知的不稳定测试反复挡住无关的改动
- Flaky Management Explorer在流水线层面追踪不稳定测试造成的失败、浪费的 CI 时间以及自动重试和测试执行优化节省的时间
- Test Impact Analysis把测试映射到它们覆盖的代码,判断哪些测试受改动影响,跳过无关测试以减少流水线工作量
工具与应用13
Datadog 推出了可观测性流水线中的 Exabeam 预配置包(Observability Pipelines Exabeam Packs),帮助企业在把安全日志送进 Exabeam 这个安全分析平台之前,先在自己的基础设施里过滤掉没用的噪音。以前的问题是:防火墙、终端和网络网关产生大量重复的日常日志,全部传进 Exabeam 会让存储和处理费用暴涨,还会把真正有价值的身份、访问和终端行为信号淹没。这些包针对不同来源预设了丢弃、去重和抽样规则,比如过滤 Cisco ASA、Fortinet FortiGate、Palo Alto、CrowdStrike、SentinelOne、Windows 和 Zscaler 的日志,同时保留检测所需的原始字段,Exabeam 的解析器不受影响。目前发布的包括七个来源专属包,以及 Active Directory、Okta、Microsoft 365、Abnormal.ai 等可搭配 Exabeam 目标的通用包,用户可在流水线中直接添加,并用实时抓取验证过滤效果。
文中可用工具
- Exabeam安全信息和事件管理平台,用于检测内部威胁等安全风险
- Datadog Observability Pipelines Packs预配置的日志过滤工具,在数据送入 Exabeam 前去除噪音
- Cisco ASA网络和 VPN 设备,其日志可通过 Pack 过滤
- Fortinet FortiGate网络和边界防火墙,其日志可通过 Pack 过滤
- Palo Alto网络和边界防火墙,其日志可通过 Pack 过滤
- CrowdStrike Falcon Data Replicator (FDR)终端安全数据源,其日志可通过 Pack 过滤
- SentinelOne Cloud Funnel终端检测与响应数据源,其日志可通过 Pack 抽样过滤
- Windows操作系统事件日志来源,可通过 Pack 过滤
- Zscalerweb 安全网关,其流量日志可通过 Pack 过滤和抽样
- Active Directory身份提供方,可通过通用 Pack 过滤日志
- Okta身份提供方,可通过通用 Pack 过滤日志
- Microsoft 365协作和邮件服务,可通过通用 Pack 过滤日志
工具与应用14
Datadog 发布官方介绍,讲如何把 Databricks 上的分析、数据工程和 AI/ML 工作负载接入 Datadog 统一监控。原来用户只能分别看 Databricks 自带指标和下游基础设施,成本和数据质量难以串起来。这次通过三条数据采集路径(集群上的 Agent 抓 Spark 指标与日志、轮询 Databricks API 拿任务运行状态、查系统表获取成本与血缘),把作业健康、花费、数据质量和日志汇总到一个界面。读者可以据此设置作业失败告警、查看 Spark 查询瓶颈、获得集群规格优化建议,并配合云厂商集成定位底层问题;相关功能已可用,但文中未说明具体版本或价格限制。
文中可用工具
- Datadog统一监控平台,汇总 Databricks 指标、日志、成本和数据质量
- Databricks被监控的数据分析与 AI/ML 平台
- Datadog Agent部署在经典计算集群上采集实时 Spark 指标和驱动/执行器日志
- Databricks API通过轮询获取作业和任务运行的近实时执行数据
- Databricks SQL warehouse用于查询系统表,获取成本和血缘数据
- Jobs MonitoringDatadog 的数据可观测性功能,监控批处理和流式作业的健康、性能和成本
- Data Observability监控数据质量、新鲜度、量和血缘的 Datadog 功能集
- Quality Monitoring跟踪 Delta 和 Unity Catalog 表的数据质量与模式变化
- Data Streams Monitoring映射流式管道服务与队列,追踪端到端性能和延迟
- Bits AI在 Datadog 内提供优化作业性能的建议
- Cloud Cost Management把 Databricks 单元成本与云支出并列展示
- OpenLineage Spark integration在经典计算集群上补充 Spark 级别的血缘信息
行业动态15
Datadog 把开源工具 Supply Chain Firewall 接入了自家的 Code Security 产品。原来这个工具只能在开发者电脑上拦截已知的恶意软件包,一旦每台机器各管各的配置,就容易失控,也没法知道哪些规则真正生效。现在可以在 Datadog 里集中设置允许和禁止名单,装到电脑和 CI 流水线里的防火墙都会自动同步,还能对已经装过的包回头复查,发现是恶意的就报警。此外新增了一个 GitHub action,让 CI 流程也能在安装前拦截。这些功能目前处于预览阶段,需要申请才能使用。
文中可用工具
- Supply Chain Firewall在安装前拦截已知恶意软件包的开源工具
- Datadog Code Security集中管理防火墙配置、名单,并对已安装包做回溯扫描
- GuardDog为恶意软件包订阅源提供数据
- Malicious Software Packages Dataset公开的恶意软件包数据集,用作拦截依据
- Datadog Software Composition Analysis (SCA)清点并评估代码仓库和运行中应用的依赖
- Supply Chain Firewall GitHub action在 CI 运行器上安装并配置防火墙,检查后续包管理命令
工具与应用16
Datadog 的工程师发现,过去用来分析 Python 程序运行快慢的工具(火焰图)在看 asyncio 异步代码时,会搞不清“哪个任务等哪个任务”,导致看不出性能问题是哪条调用路径造成的。他们新做了一种“异步感知”的分析方式,像记录函数调用关系一样记录任务之间的父子依赖,再把相关任务叠起来展示,这样就能看出一个协程到底在等什么。同时他们还把分析器自身的额外开销降低了 60% 以上,并产出更精细的数据。对用 Python 写异步服务的人来说,以后定位异步任务的性能瓶颈会更清楚。文中没有说明这个新版分析器是否已对所有用户开放。
文中可用工具
- Datadog Python profiler用于分析 Python 程序性能、生成火焰图的性能剖析工具
- asyncioPython 中编写异步并发程序的库,用协程和任务替代手动管理线程
工具与应用17
Datadog 推出 RUM 远程配置功能,让开发者可以直接在 Datadog 界面里修改浏览器、iOS 和 Android 端 RUM SDK 的采样率、隐私设置和数据采集范围,不用改代码重新发版。过去这些设置写在应用代码里,改动必须发新版本,移动端还得等应用商店审核和用户慢慢升级,遇到故障想多采数据时来不及。现在只需在初始化代码里加一个远程配置 ID,SDK 下次启动时就会拉取最新设置。新应用默认开启,老应用手动接入即可。
文中可用工具
- RUM Remote Configuration在 Datadog 界面远程修改 RUM SDK 的采样率、隐私设置和数据采集范围,无需重新发布应用
- RUM SDKDatadog 的真实用户监控 SDK,运行在浏览器、iOS 和 Android 应用中采集用户行为与性能数据
- Session Replay会话回放功能,可录制用户操作过程用于排查问题
工具与应用18
Datadog 推出了一项叫 Tap to Parse 的 AI 辅助功能,用来解决日志里有用信息被埋在一整句话里、难以筛选和统计的问题。以前想从日志里提取状态码、耗时这类字段,得自己写复杂的正则或 Grok 规则,遇到不归自己管的服务或第三方系统就更麻烦。现在只要点一下某条日志并选择 Tap to Parse,Datadog 就会分析样例、自动生成解析规则,并让你先预览再应用,提取出的字段就能用来筛选、分组和画图。它能在 Log Explorer 里查询时用、在 Log Pipelines 里对以后新进的日志用,也能在 Observability Pipelines 里让日志离开你的环境前先结构化。目前 Log Explorer 和 Log Pipelines 中已正式可用,Observability Pipelines 中需申请开通。
文中可用工具
- Tap to Parse一键从非结构化日志中自动提取可搜索字段的 AI 辅助功能
- Log Explorer在查询和调查日志时查看、筛选日志,并可使用 Tap to Parse
- Log Pipelines在日志进入时处理日志,用 Grok Parser 为以后的日志提取字段
- Observability Pipelines在日志离开你的环境前先做结构化处理
- Grok Parser在 Log Pipelines 中定义规则,从日志里提取结构化字段
- Datadog提供日志和可观测性功能的平台
Agent 与工作流19
Datadog 的工程师把 Qwen3.5-9B 微调成一个专门做“变更归因”的小模型:告警响了以后,它能推断最近哪次部署、功能开关或配置改动最可能是元凶。原本用规则筛选又快又便宜,但遇到复杂故障就不准;用 GLM-5.3 这类前沿大模型做多轮智能体调查则准得多,可每次调用 API 约 0.06 美元,全量告警跑不起。他们用 GLM-5.3 生成的 348 起内部事故调查轨迹来训练小模型,结果小模型达到 GLM-5.3 召回率的 87%,自托管每次调查成本约 0.003 美元,约为原来的二十分之一,一张 40GB A100 每周能支撑约 10 万次调查。目前这还只覆盖客户每周数百万个监控项中的一小部分,团队称会继续优化以扩大适用范围。
文中可用工具
- Qwen3.5-9B被微调成专门的变更归因小模型
- GLM-5.3作为教师模型生成调查轨迹,并解析事故结论提取变更标签
- Change TrackingDatadog 功能,展示最近变更并标注可能与告警相关的改动
- Relevant ChangesChange Tracking 中的标签页,在告警时间线上叠加最近变更
- Model Context Protocol (MCP)把 Change Tracking 数据开放给智能体调用的协议
- Bits InvestigationDatadog 的智能体事故调查功能,会引用 Change Tracking 捕获的变更
- NVIDIA data flywheel blueprintNVIDIA 的数据飞轮方案,用于生成轨迹、训练小模型并循环迭代
行业动态20
WHOOP 是一家做健康手环的公司,每天要处理成千上万条漏洞告警,靠全员连续多天手工分类才能不漏掉问题,既费人力又容易被噪音淹没。这次他们用 Datadog 的 Bits AI 和 Workflow Automation 搭了一套自动化的漏洞响应流程:先结合运行时数据判断哪些漏洞真的在被利用,再把工单自动分配给对应微服务的负责人,让开发者能自己处理一部分。原文尚在预告 2026 年 10 月 7 日的线上分享,具体实现细节和效果数据没有给出;不过它的思路是自动化处理加人工最终确认,对同样被大量漏洞告警困扰的安全和运维团队有参考意义。
文中可用工具
- Datadog Bits AIDatadog 的 AI 功能,用于辅助自动化漏洞响应流程
- Datadog Workflow AutomationDatadog 的自动化流程工具,用来把漏洞工单自动分派给对应工程师
- Datadog Software Composition Analysis (SCA)分析运行时实际执行的代码,帮助从扫描噪音中筛出真正有风险的漏洞