Ch.0 前言 — 先判断再摊
来源:《深入理解 AI Infra》前言。方法展开:Constraint-Driven Design。
核心判断
编程抽象上移:模型 ≈ LLM 时代的 OS,AI Infra ≈ 其体系结构。跨层工作方式:最懂 Infra 的人做算法,最懂算法的人做数据,最懂数据的人做 Infra。 DeepSeek V4 / V4.1 CED 被当作「系统约束倒逼模型结构」的例子。
贯穿线索是数据搬移五问:搬什么、搬多少、搬几次、经过哪里、谁必须等它。保留数据减重算但占容量;扩大并行减本地工作但加通信。
十二章顺序
作者路径:FPGA 模型并行 → AKG / 在线 softmax → UB 万卡互联 → 实时语音(5 s → ~500–600 ms)。