Google DeepMind·· 2026-04-22AI 评分52
Google DeepMind 提出 Decoupled DiLoCo,支持跨数据中心训练 LLM
Decoupled DiLoCo: A new frontier for resilient, distributed AI training
AI 导读
Google DeepMind 发布论文提出 Decoupled DiLoCo,一种把训练拆分为解耦计算岛屿、岛屿间以异步数据流通信的分布式架构,可在跨数据中心的条件下训练 LLM,带宽需求更低且硬件容错性更强。
来源:Google DeepMind · deepmind.google