TMS BOOK · ACADEMY 课题

NVIDIA 机柜级参考架构解构:GB200 NVL72 与 MGX 的冷却约束

机柜级参考架构给的是一整套互相约束的冷却要求,必须整套读、逐条翻译成机房设计输入。在这类系统里冷却与算力同级:不达标直接触发降频,损失的是算力本身。

R9-01 · 算力中心与液冷 / 标杆架构解构(厂商规范专题)
L3 专家 系统结构
待认领listed → 众筹中recruiting → 已开课open · Course 售卖 一课题可并存多讲师版本

课程大纲

学完能做什么
  • 读懂一份机柜级参考架构给出的冷却约束,说得出每一条约束背后的物理原因
  • 说清偏离约束的后果不是性能下降一点,而是触发保护机制
  • 把参考架构的要求逐条翻译成机房侧的设计输入
  • 识别参考架构里哪些是硬约束、哪些是推荐值,以及怎么分辨
内容大纲
  1. 参考架构给的是什么
    • 它给的是一整套机柜级的机械、供电与冷却约束,而不只是一份产品规格
    • 被反复传播的是进液温度、流量、允许压降与结温上限这四个,但它们只是入口而不是全集;其中「进液温度」是一个区间——上限管结温、下限管露点,两端的物理完全不同
    • 流量不足时可以靠更低的进液温度补,但这条补偿有三重边界:进液温度被机柜内空气露点从下面卡住、流量下降本身抬高冷板对流热阻(故补偿是非线性且有上限的)、且进液温度还受设施侧能力限制 ⇒ 它是应急手段,不是设计手段
    • 所以它必须整套读,抽出单条来谈没有意义
  2. 偏离的后果
    • 现代加速卡内置温度保护,超过阈值会自动降频
    • 降频不是线性的性能损失,而是可能大幅下降的台阶
    • 这意味着冷却不达标直接损失的是算力,而算力正是这套设备的全部价值
    • 所以在这类系统里,冷却是与算力同等级的约束,不是配套设施
  3. 翻译成机房设计输入
    • 进液温度要求,减去分配单元的逼近温度,得到设施水温上限
    • 整柜流量要求,决定二次侧管路与分配单元的流量能力
    • 允许压降,决定管路长度、接头数量与冷板选型的可用预算
    • 结温上限与冷板热阻一起,反过来校核进液温度要求是否还有余量
    • 四条只覆盖设施水系统与二次侧分配单元两个收件人;空气侧、电气、结构与土建、监控运维、验收这五个收件人一个输入都拿不到,必须逐个补齐
  4. 硬约束与推荐值
    • 涉及保护动作的通常是硬约束,超了就触发降频或停机
    • 涉及效率与寿命的往往是推荐值,短期偏离不会立刻出事
    • 参考架构不一定明确标注哪些是哪些,需要结合保护逻辑判断
    • 拿不准时按硬约束处理,并向厂商确认;这类问题的确认成本远低于返工
关键公式
T_设施水上限 = T_进液要求 − 逼近温度
把参考架构的要求翻译到设施侧的第一步。★ 本式与 R9-02 是同一式:本课只做翻译动作,两个量的口径、两义与待核假设去向 R9-02
Δp_可用 ≥ Δp_管路 + Δp_接头 + Δp_冷板
参考架构给的允许压降是一个预算,要在各环节间分配
关键概念
机柜级参考架构进液温度要求整柜流量允许压降结温保护降频台阶硬约束与推荐值
推荐工具与标准
厂商参考架构文件(须自备,且须注明代次) 二次侧压降清单 分配单元性能曲线
设备厂商的机柜级参考架构与热设计文件(冷却约束的来源;随芯片代次变化,引用时必须注明代次与获取日期,本课只写去向) 液冷相关开放硬件规范(接口与测试方法的来源;按现行发布确认) 以上文件的编号、现行版本与条款内容一律按现行有效版逐条核对;本大纲未填入任何条款级判定表与限值
工程案例
(教学构造案例,不对应任何真实项目)给定:某项目按参考架构里的进液温度上限做设计,其余按经验取值。判据:参考架构里的流量与压降要求同样是硬约束,必须逐条翻译。结论:二次侧管路较长且接头较多,实际压降超出允许值,流量达不到要求;运行时结温接近保护阈值,负载稍高即触发降频。做错的代价:算力达不到采购时的预期,而问题出在管路而不是设备。根子在于只翻译了一条约束,把其余当成了参考。
动手做
交付物 · 取一份机柜级参考架构(注明代次):① 把冷却相关的约束逐条列出,标出各自的物理原因;② 逐条翻译成机房侧设计输入;③ 累加二次侧压降,核对是否落在允许预算内;④ 判断每条约束是硬约束还是推荐值,拿不准的列出并写明确认方式。
常见误区
  • 只翻译进液温度一条:流量与压降同样是硬约束,漏掉会在运行时暴露
  • 引用参考架构不注明代次:厂商要求随芯片代次变化,不注明代次的引用很快失效
  • 把降频当成小幅性能损失:它是台阶式的,冷却不达标直接损失算力
  • 把不确定的当推荐值:拿不准时按硬约束处理并向厂商确认,确认成本远低于返工
相关课题
前置:R1-04 风冷的物理上限 · R3-01 冷板结构与流道设计 · R5-01 CDU 形态与选型
适合:要按厂商参考架构做机房设计的系统岗;以及需要理解「为什么这些数字不能商量」的项目岗。 · 时长 约 3~3.5 小时(8 讲 + 1 次参考架构约束翻译表)

需求区 · 想听众筹

0/10 人想听
登录后想听 / 点名

想听/点名均为需求登记,不涉及任何付款(意向金仅登记不收款)。满 5 人点名 → 自动向平台专家发邀约。