今天想给女儿介绍IDC,最近很火的词元经济,每次和豆包、DeepSeek对话背后的故事,算力数据中心普通人感知不到,而用AI写个代码、生成一个短剧,消耗大量Token却是实实在在能感知到的。
算力本质是电的生意。所谓“词元工厂”,就是一群把电变成词元的机器。
但光有电还不够——它还很吃东西向网络流量。GPU之间要不停互传数据,梯度同步、激活值交换,卡间通信一旦慢下来,再贵的芯片也只能干等。所以英伟达拼命做NVLink、InfiniBand,因为GPU之间的互传带宽,决定了整个集群的真实算力利用率。
还有一个反直觉的变化:以前大型数据中心靠蒸发冷却,耗水量大得吓人。但到了英伟达RUBIN这一代,新型液冷方案把耗水量大幅压了下来。算力的物理账本正在改写:电是主角,网是命脉,水正在退场。
词元工厂
一句话:如何高效从电力->算力成本最低,以前算力计量单位是带宽和计算存储,现在是Token
传统IDC:做的是"空间+电力+带宽"的出租生意,本质上是数字世界的地产商
AIDC:做的是把电力转化为算力的生产生意,更像是一座可以源源不断产出智能的工厂
一条“电力 → 算力 → Token”的生产线
把电送进数据中心,让GPU芯片把电能变成计算能力,再通过大模型推理,把算力“加工”成 Token
关键元素:Watt(电)、Heat(热)、Bit(数)
词元就是豆包和DeepSeek的计量单位,也是AI短剧和AI编程、AI办公的基座?
优化目标:如何让一瓦特的电产生更多的Token?
词元工厂是如何运转的?
黄仁勋将新一代数据中心定义为 Token Factory,给出核心营收公式:收入 = Tokens/W× 可用千兆瓦数,产业竞争从比拼峰值算力转向每瓦词元产出(Tokens/W) 的能效竞赛。
AIDC成本:AI硬件、场地是一次性固定投入,成本优化重点是电力
生产环节:AIDC机房里的AI芯片、服务器通电后,对输入的数据做大模型推理,每完成一次推理就产出若干词元。硬件决定产能上限,电力是核心燃料
成本结构:电力成本占数据中心运营成本的50%—70%,是词元生产最大的刚性支出。 国内主流大模型高强度推理下,生成100万个词元平均耗电约15—20度
词元成本构成
词元之所以需要付费,根源在于它的“生产”涉及真实世界的四大成本,涉及AI训练和推理
厂商的定价,本质上是对这些成本的回收与分摊

Anthropic CEO Dario Amodei调侃:“AI训练像建电厂,推理像日常发电卖电”
硬件成本和人力是固定成本
词元工厂背后的AIDC是耗电和产热大户,单个GPU服务器机柜就是传统通用服务器的十几倍以上
而GPU温度高了会罢工,单位算力越高,功率越高,功率高意味着电流高,也意味着单位产热效率也更高,传统冷却方式根本压不住AI服务器单位产业效率。


1、训练阶段
输出最新可用的LLM,例如DeepSeek V4Pro、V4 Flash
要求算力高、单次训练周期长,需要大量数据高负荷计算
典型设备:英伟达GB200、GB300
1 个 GB300 模组(1 Grace+2 B300):芯片总上限≈2800W,整机(含网卡、存储、液冷泵)满载约3000W;实际训练负载一般稳定在 2400–2800W(利用率 80%~95%)
GB300 NVL72 整机柜:标称持续功耗 132–142 kW,峰值可达 155kW(满负载训练)
算上训练时长,耗电
整机柜训练平均取 135kW,PUE=1.2
训练 1 小时:135 ×1 ×1.2 = 162 kWh
连续训练 7 天:135 × 168 ×1.2 = 27216 kWh
2、推理阶段
每次生成都需要单独计算,并发高、频率高
可以用免费的LLM,也可以是边缘计算AMD 锐龙 AI Max+ 395、英伟达DGX、GTX 5090跑本地模型
耗电从数据中心->家里

RTX5090,每天 6 小时跑 70B Q4(均值 450W)
每小时耗电:0.45 kWh,6h=2.7 kWh
每日电费:1.62 元,月≈48.6 元
Ryzen AI Max+395 迷你主机,每天 6 小时跑 70B Q4(均值 150W)
每小时耗电:0.15 kWh,6h=0.9 kWh
每日电费:0.54 元,月≈16.2 元
3、冷却系统耗电
液冷是必选题,风冷压不住
传统风冷或开式冷却塔是耗水大户,而液冷配合干冷器耗水反而大幅降低
英伟达发布的 Rubin 100% 液冷方案,将冷却液最高工作温度提升至45℃,通过干冷器闭环架构实现年冷却用水量接近零,仅约1%的极端天气时段才需启动冷水机组。

IDC整体耗电成本
词元工厂的电力消耗主要分为两大板块:
算力核心耗电:占总耗电量的85%左右,全部用于GPU、CPU等智算硬件的大模型推理运算,是词元生产的核心动力来源。
配套系统耗电:占总耗电量的15%左右,包括制冷、配电损耗、网络设备等辅助设施的电力消耗,这部分占比直接由PUE(电能利用效率)决定。
以贵州壹号词元工厂为例,依托当地年均15℃的自然气候,通过自然风冷协同运行,全省数据中心平均PUE低至1.17,意味着仅17%的电力被温控等配套环节消耗,远低于常规数据中心的平均水平。部分采用风液融合制冷技术的先进词元工厂,可实现PUE低于1.15
Token产业链:

底层:AIDC机房(GPU、液冷、发电机、光模块等)
中游:各种LLM平台(豆包、DeepSeek、千问、Kimi等)、分包商(阿里百炼、硅基流动等分发商)
下游:Agent(WorkBuddy、Cursor、OpenClaw、Hermes等)
How Much Water Did I Waste?(AI 对话->需要的水资源)
输入 AI 对话次数,自动算出:每一轮大模型问答背后,数据中心消耗的淡水,换算成瓶装水直观展示。

🔗 https://howmuchwaterdidiwaste.com/
庞大耗电量、发热量倒闭AIDC机房重构
1、立体式数据中心设计

华为在2026年9月15日于安徽芜湖正式发布了全球首个3D数据中心架构:
借鉴芯片工厂“动力层”与“生产层”严格分离的理念,把传统数据中心水平铺开的供冷层、IT设备层、供电层、备电层垂直叠加,形成立体堆叠的“超级算力工厂”。
垂直供电供冷缩短了能源传输路径,减少损耗;备电层部署在屋顶,提高安全性;分区隔离、故障不蔓延,增强高可靠能力
相对平面园区,意味着更少的土地可以承担更大的算力输出
2、平面式园区AIDC设计
从面积上,IT设备机房占AIDC面积占比远小于供电和散热模块

围绕IT设备铺设大面积的制冷设备、管线

评论区