🏷️ Jeff Dean

Jeff Dean新论文：弹性分布式预训练终于可行，240万芯片集群不再被故障卡死

2026年4月25日谷歌Jeff Dean等发表Decoupled DiLoCo论文，实现弹性大规模分布式预训练，240万芯片集群有效利用率从58%提升至88%，带宽需求降低100倍。