
九月的一个下午,某智算中心验收到货的 250 台 GPU 服务器,一共 2000 张卡。机房是新的,150 个机柜位,每个柜位按 12 千瓦配电,走道上还堆着拆开的木箱和泡沫。运维拿着上架单从前往后填,填到最后一排,只填进去 150 台。
剩下 100 台原箱退回,800 张卡在木箱里躺了两个星期。总工蹲在配电柜前看了半天,说了句怪话:电是够的。
确实够。150 台跑满,机房 IT 负荷 1050 千瓦,市电批下来 1.5 兆瓦还空着一截;可那 800 张卡本该这个月上线,客户的排期已经催到第三遍。卡够、电够、柜子也够,三样凑齐了却装不进去,我把这张单子从头算了一遍,卡不是瓶颈。
为什么会这样
一句话:卡算得快,是因为它吃电;一个机柜能扛多少瓦,出厂那天就定死了。机柜像电梯,标着限重——电梯标 1000 公斤,10 个瘦子站上去刚好,8 个大汉上去就超载,不是人多,是每人太重。
这里一张卡按 700 瓦算(假设),跟一台小电暖器差不多。一台机器插 8 张,光卡就是 5.6 千瓦,再加 CPU、内存、网卡、风扇 1.4 千瓦,整机 7 千瓦。这 7 千瓦是插上电就一直烧的,跟它跑得快不快没关系。
再看柜子。风冷机柜常见配电 8 到 12 千瓦,12 千瓦的柜放一台 7 千瓦的机器,还剩 5 千瓦;放第二台就要 14 千瓦,空开直接顶。所以 150 个柜就是一柜一台,150 台,正好 1200 张卡。
还有一笔是 PUE,电能利用效率:IT 设备用 1 度电,整栋楼要买 1.3 度,多出来的是制冷和配电损耗。150 台跑满 1050 千瓦,乘 1.3 是 1365 千瓦,1.37 兆瓦,离 1.5 兆瓦只剩 135 千瓦;换成 2000 张卡全插上,1750 千瓦乘 1.3 是 2275 千瓦,2.28 兆瓦,比批下来的多 0.78 兆瓦。退回去的那 100 台,缺的不只是柜位,还有 700 千瓦。
怎么解决

三条路,从最便宜的往上走。
- 先把现有的卡排满。 1200 张卡假设现在只用上一半多,排满不用花一分钱,改的是排期规则:把能被打断的活,比如批量推理、离线评测,塞进别人不用卡的时段。按利用率 45% 抬到 70% 算(假设),等于凭空多出 300 张卡在干活——1200 乘 25%,就是 300。
- 改柜子,让一柜放两台。 封闭冷通道、加盲板、把 12 千瓦柜换成 20 千瓦柜配列头柜,一柜两台 7 千瓦正好 14 千瓦。改完 150 个柜放 300 台,2400 张卡,比现在多一倍。这是花钱的活,但比新建机房便宜一个量级。
- 上液冷,或者换个地方建。 液冷柜能扛 40 到 60 千瓦,一柜塞五到八台,同样面积多装三四倍。代价是配电和管路都要重做,只有新建项目才划算。
别踩的三个坑:坑一,按卡数订货,不按千瓦订货:采购单写 2000 张卡,配电单写 1.5 兆瓦,两张单子没人对过。坑二,把设计 PUE 当实测:图纸上写 1.25,跑起来 1.4,多出来的电没人算进预算。坑三,看着柜位空就以为电还多:末端配电、UPS、制冷往往先满,柜位是最后才缺的。
平台怎么管这些问题
上架之前,机位台账里记着每个柜多少千瓦、装了几台、还剩多少;填单时功率校验把整机 7 千瓦累加,超过柜子上限直接拦,不给“先上再说”的机会。
跑起来以后,功耗和温度按柜、按机器、按卡 5 分钟采一次,哪一柜贴着上限,提前看得见。卡时清单(一张卡占一小时算一个卡时)每天出一版,谁在跑、谁占着不动一目了然;调度把能被打断的活塞进空档,把空转的卡时填掉。剩下一条线是告警和工单:单柜超功率、超温、设备掉线,直接生成工单派到人手上。
这些功能平时谁管,比功能本身更重要。
- 柜位功率上限谁能改:机房主管,一个人一个账号,改一次留一条记录。
- 谁能批超限上架:运维负责人,一柜一签,签完附进项目档案。
- 出了事能不能倒查到人:能。规则改动带账号和时间,翻到哪一天都查得到是谁动的。
- 掉线告警发给谁:值班工程师,按班次轮值,15 分钟没响应自动升级给主管。
这笔钱值不值
掏钱的是机房这一方,也就是把卡租出去的人。
先说零成本那条:利用率从 45% 抬到 70%,多 300 张卡干活。按一张卡一个月 1500 元算(假设),一个月多 45 万,改的只是排期规则。
再说改造。150 个柜,按每柜 5 万元(假设)是 750 万;改完多装 150 台、1200 张卡,满租月收入 180 万。电费反过来算:一台 7 千瓦,一个月 720 小时,乘 1.3 的 PUE 是 6552 度,150 台约 98 万度,按 0.6 元一度是 59 万。
180 万减 59 万,一个月毛利 121 万,750 万大约 6 个月回来。前提是满租,只租出去七成,收回成本的时间就拖到 11 个月往上。
国家为什么也盯这件事
2026 年 9 月 7 日,工业和信息化部印发《信息通信行业发展“十五五”规划》。规划列了 13 个主要指标,其中一条是:到 2030 年,新建大型超大型算力设施运行电能利用效率(PUE)降到 1.2 以下。规划里还写了“推进算力电力协同发展”,鼓励绿电直连、源网荷储。
放到那个机房上很具体。现在的 1.3,1050 千瓦 IT 负荷对应 1365 千瓦;按 1.2 算只要 1260 千瓦,差 105 千瓦,差不多又是一个机柜排的电。
那 100 台机器退回去一个月,等柜子改完又拉了回来,验收单上最后写的是 2400 张——还是那 150 个柜。总工只说了一句:卡不缺,缺的是插卡的地方。
算力:慧知开源智算调度平台
GPU 资源池化、任务调度、多租户和计费一套管,装在自己服务器上,能改能扩。
点这里看详情 →