监控 Kubernetes 中 AI 训练的 TAS 与 Gang Scheduling
Datadog 介绍如何关联 Kueue、Coscheduling、GPU 和训练框架信号,以验证 gang scheduling 和拓扑感知调度(TAS),解决分布式 AI 训练在 Kubernetes 上的调度难题。
内容浏览
搜索中文标题、仓库名或关键词,再用分类、来源和日期缩小范围。
今天暂时没有新上架内容,你可以继续浏览历史归档。
Datadog 介绍如何关联 Kueue、Coscheduling、GPU 和训练框架信号,以验证 gang scheduling 和拓扑感知调度(TAS),解决分布式 AI 训练在 Kubernetes 上的调度难题。
Kubernetes 1.36 正式推出 VolumeGroupSnapshot API,将传统企业存储阵列中的一致性组概念带回云原生环境。此前 CSI 的 VolumeSnapshot 仅针对单个 PVC,多卷应用(如数据与 WAL 分离的 PostgreSQL)在快照时存在时间差,导致备份虽报告成功却互相不一致。新 API 通过标签选择器将属于同一应用的多个卷在一次原子操作中同时快照,无需暂停应用,Velero 等备份工具已开始基于该上游标准构建恢复流程。
文章讨论云资源缺乏负责人标签的治理难题:当创建资源的员工离职后,无人知道实例为何存在。作者提出三个已有工具的解决方案:用 CloudQuery 的资产清单 SQL 查询找出所有缺少 owner 标签的资源;用 env zero 基于 Open Policy Agent 的策略阻止无 owner 标签的新资源被创建;以及保留超越个人任期的审计记录,记录申请人、批准人、用途等信息。文章指出员工流失加速,标签会像其他东西一样腐化,组织架构会变,但记录不必变。
本期 Spring 周报由 Josh Long 撰写,涵盖 Java 内存管理演讲、Spring AI 聊天记忆摘要技巧、Spring Security 与 OAuth 2.0 保护 JavaFX 应用教程、OAuth 2.1 与 Spring Authorization Server 安全文章、Spring 与 Gemini 视频理解视频、新 Java AI 库 Quixotic.ai、Netflix 的 Paul Bakker 播客访谈、Spring Batch IntelliJ IDEA 插件、Spring Batch 百万行扩展文章以及 Baeldung 的 Spring 调试器指南。
文章介绍通过精确匹配、语义匹配与混合缓存三层策略,在调用 LLM 前复用已有答案,从而减少重复请求和 token 费用,并强调需对输入、上下文、模型设置与数据版本进行指纹校验。
Fyxer 利用 OpenAI 模型、微调、记忆机制和真实用户反馈,帮助用户整理收件箱,并以每位用户自己的语气起草邮件。
AWS 将 Lambda SnapStart 扩展到容器镜像函数。容器镜像函数容量上限为 10 GB,远高于 zip 归档的 250 MB,但此前选择容器就意味着放弃 SnapStart、接受数秒启动时间。如今团队无需再在依赖空间和亚秒级启动之间二选一,不过除 Java 11+、Python 3.12+ 和 .NET 8+ 的 AWS 基础镜像外,其他镜像需添加特定 LABEL 或实现运行时钩子。
Google Pics 是 Google Workspace 推出的图像创建与编辑工具,基于 Nano Banana 图像生成与编辑模型,将在未来几周内向所有 Google AI Pro 和 Ultra 订阅者以及大多数 Workspace 商业客户推出。它既是一款独立产品,也会集成到 Workspace 应用中,首批支持 Slides、Docs 和 Drive,提供对象分割、图内文字编辑与翻译、协作编辑和一次生成多个版本等功能。
谷歌 DeepMind 与导演 Liz Garbus、Darren Aronofsky 的团队合作拍了一部短片《Love, Rendered》,主角是一对结婚70多年、正经历认知衰退的老夫妇。他们当年相遇的那一天没有照片也没有录像,只存在于两人的记忆中。团队用生成式模型修复老照片,又用动作捕捉模型把老人现在的神态习惯映射到年轻时的样貌上,做出了一段他们觉得“真实”的回忆画面。对普通人来说,谷歌表示可以在 Gemini 应用里上传老照片,让它修复并上色,用来保存家人的记忆。片子的具体上线平台和更多技术细节,原文没有说明。
Google 给搜索加了几个看橄榄球比赛用的新功能。以前想查实时战况、球员数据或者对比多场比赛,得自己一场场搜,也很少有现成的分析。现在直接搜正在进行的比赛,就能看到带“Live”标记的实时动态时间线,里面有逐回合更新、视频集锦和 AI 生成的解读;搜对阵时还能左右滑动看同一联盟其他场次的比分。如果你玩范特西橄榄球,可以把 Yahoo Fantasy 或 Sleeper 账号安全关联到搜索的 AI 模式,让它根据你阵容和联盟情况给出首发、替补或捡人建议,不用手动抄数据。目前这些功能大多只在美国、英文、手机上可用,实时动态先支持职业比赛,大学球队等后续才加。
谷歌博客介绍了用搜索的AI功能备战跑步比赛的三种方法。以前跑者要自己查资料、拼凑训练计划和装备信息,比较费时。现在搜索的AI模式能帮你用Canvas工具制定个性化训练计划,连接YouTube Music生成跑步歌单,还能根据足型、预算等条件对比商品并查看本地库存。对跑步爱好者来说,找方案、选装备会省事一些,不过这些功能目前只有部分用户能用。
文章以 Cursor 的视角回顾了大规模托管 Git 仓库的演进:从分布式文件系统到 GitHub 的 Spokes 应用层复制,并指出现有 Spokes 方案的三阶段提交存在副本数量限制,难以应对 2026 年的大型 monorepo 与海量小型仓库场景。