TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:
. K2 W& E, B9 U! Z: G6 p, r& G O/ K( T/ q$ o
一、总体分析框架与核心结论# l. S, V6 u. l4 {9 G8 D
1.1 分析框架概览4 @4 d% j, S/ m2 q' i. @
拆分维度
) A) j9 O* x& |# v9 {+ u H4 t3 f+ u# A$ T$ `
阶段:9 v8 Q7 j0 b6 f% }5 _% s
建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施( K$ | k% O U8 ~
运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等/ Y5 m" k2 @$ W, x0 |
区域:
- |) u1 w; R$ _/ ~3 u中国、美国、欧洲、中东(以海湾地区/UAE 为代表)
7 T- O' }; ^; C, q技术方案:5 j4 D* C- e' A7 N1 s
NVIDIA(H100 / H200 / B200 / GB200 NVL72 等)
* E; W5 ~) W& ]* lGoogle TPU(v5e/v5p/Trillium 等)/ [" |/ C! l- l& _9 H8 O% |
中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)4 ?9 u d% F) Q2 P. a
算例基准
" m4 m3 F! P; I' d3 W' [9 p9 K0 M# A# @/ z/ g& B% b y8 |- b
以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:, n3 A: h6 r2 ?' ?+ i4 _( T: Q! u
其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW
+ J9 Z$ j+ L. q1 Y7 n. ^PUE 假设约 1.11(高效液冷场景)[1][29]$ T4 a$ |3 Y1 l1 c q
时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28]
9 I" Y3 \; F( {/ i x. u' R9 n) `关键指标
4 p) n- c8 |1 Y' m Y
0 g$ ?2 x/ H( J! o1 x! x$/MW 建设成本(含/不含 IT 硬件)+ N( u9 c/ P. \+ c8 ~5 K
$/kWh 电力成本、L/kWh 水耗
. X" {) C1 b9 S8 N2 f' I$/token 或 $/百万 token 的综合成本
$ x+ Q0 B8 X& w$ _, E! UToken-per-watt / Joule-per-token 作为能效基准[17][18][26]( W& v* b1 [# e* C4 k9 T* T
项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租)
. _* K$ A3 ~8 t6 N1.2 高层结论(供决策快速参考), C s% D v8 B: A6 H0 P
建设成本:AI 数据中心相对传统云数据中心成本翻倍
1 W. B6 L% e* n- e* A1 J4 T) e- v5 R M) h Z
传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。
* {8 _* _$ `# m/ M7 k# J+ o: cAI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。
; W8 U1 Q: S! a) ~2 E3 K: U2 z- o按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。# @' X% W3 V! o$ ^5 y& }5 Z4 S, n
区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区
: h7 n: ?# D/ a$ q b
+ d5 j* T6 S! m$ {, L中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13]
1 |7 a& U0 Z9 a8 @% T8 Q2 ~7 y: R美国:$8–12M/MW,400 MW 约 $4.0B[1]; b3 @6 Q: t9 t
欧洲:接近全球平均 $10.7–11.3M/MW[2][41]
) [- Q- [1 I3 s# t1 K! O中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]
0 }+ P* U3 Y' Q q# M5 t5 C) i$ q7 ?结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。
1 q$ E" L/ F* NOPEX:电价与人工决定区域优势! S9 q: z4 z- h b+ N! H
( o8 o% M, }; T7 ~+ a7 ^5 a
电价(2025–2026 工商业大致区间): |" Y4 T* F9 K6 F
中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]$ O0 ~# c2 W! t6 t) Z* ]% ?4 K
美国:工业用电约 $0.085–0.09/kWh[44]) ?7 I5 t0 z4 K a8 w; c
欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]. y3 v5 W9 |6 T. o
中东/UAE:工业用户 $0.07–0.13/kWh[47]$ a1 X/ ^1 m9 M' k) n
人工:
1 M' @3 L. ~ e1 o中国数据中心运维:约 $22k/人/年! j+ ` B) p' P/ _
美国数据中心运维:约 $120k/人/年[1]9 u7 H1 b' H3 m: A' d
结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。
) O2 T3 ^1 A9 e3 N. \2 X能耗与每 token 能源成本:能效差异远大于电价差异0 ?& }6 ~6 N$ a5 m0 E1 ^2 _9 K3 I
: S- O* c. ]' w; z9 k1 D pIEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。4 |5 |) E7 x: n- N7 u
大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。4 f: T9 V1 V% x9 x# ^ i
将 token 能耗约化为统一口径:
C9 D; L! m" P& W8 s: m3 k9 @: X粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:' `& Z7 _9 D5 b) T0 s9 ~
中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token
& r) g* B5 w2 N1 e美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token
# ~8 e: ~) [; Y1 Z* E# R! g对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。
& O5 x2 j9 R/ }* N, U, W: ^7 g不同芯片方案的核心差异
$ e, ~0 S# h8 L3 s
: J& z! l. F# u# g. p3 INVIDIA Blackwell/B200 & GB200 NVL72:
0 M$ I# b6 d* }& R2 V+ d( l单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。& G2 x: D9 p6 @
GB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。$ K& x2 `$ g, W- I& i
Google TPU v5e/v5p/Trillium:
% q8 {- o2 V; z$ R9 pTPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。% P8 O: a! G$ U, S0 R/ Y( q' g7 e
Google 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。% E* b3 f4 N8 o0 M
华为昇腾 910B:
" k: Q9 {/ n# A( ~FP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。3 i) w6 g; {8 z+ W1 I
单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。6 r* e5 V7 M: m; U* k% X S9 n
阿里平头哥真武 810E(Zhenwu PPU):/ ]+ U5 z, V/ w% h+ Y; ]
96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。$ a9 o% G' H7 A; F S' s1 e; Z
结论:
" i0 ~* N5 n! M能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。# _5 g" ? }7 U* f
单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。! h- X& T* Z4 Q8 y
对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。
) t1 b' A+ ^7 r( y4 l自建 vs 云租的 TCO 与 token 成本* H" b/ O0 Y, q4 s
7 X; h( i! q8 J) t, JLenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:8 a0 I/ R8 {' L
8×B300(Config D)自建 5 年 TCO ≈ $1.01M;$ M* a. x' X0 I# |! J% F" x# ~3 X
等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。
% d9 m0 {2 ]! m/ V# q7 r8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。* R7 E+ w, ~; Q+ q: U- i
Token 成本对比示例(LenovoPress 场景)[28]:! Y! r2 \* O1 s& r6 p5 U
Llama‑70B 推理,8×H100 本地:约 $0.11/百万 token1 H1 H s9 b4 s5 x7 b/ ~$ R1 |
vs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。; D. I& D @( H0 x1 U8 j* u* B
同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。
6 ^. F# M# A! M- G' W* ]# z& xLlama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。- \: Z2 _; l; Z2 H
结论:" P' F( B& G( }+ D* d }+ B
高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。
/ a% ~. X2 T" W! E! nToken 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。
+ k; f a4 A7 G+ w二、建设期成本分布:区域对比
- q8 J$ U7 o4 p; Y! z6 A, y以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。
! L0 T0 u& ~( e8 c4 S
; w. m3 k3 ` O( Y0 b2.1 全球/通用结构(以 1 MW 为单位)
9 X5 x: s* m! ~& y综合 JLL、ConstructElements 等[2][41][40]:
& P+ b% N; i" T& [+ m4 A3 a6 }" u! a/ w4 b" n
壳体+机电(Shell & Core)( ?* N0 N3 m3 u% v D
2 v; s, t: x5 d+ X& i6 ]; C全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]) \; E0 l1 b4 v( G K
其中按成本构成[40]:
* K/ y- m( ^- Z7 V" b8 P电力系统(变电、配电、UPS、母线等):40–50%; ]* Y. r4 r1 E& `) |4 v/ B5 G
机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%
+ s% y) n) r# [4 Q! A建筑与土地、结构:约 15–20%
% }: V5 n( j$ z3 e3 Y其他(消防、安防、楼宇管理等):约 10–15%
. j7 s9 j8 G" _* i, c. g3 X; mIT 内装与 AI 基础设施(不含芯片)
5 B! X0 x/ ]; o( h5 x5 {
8 d. z* Y$ ~! L高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。2 A$ y* G5 c: h2 {9 U* s8 N
GPU/加速卡硬件 CAPEX7 q& }: u. W, m1 k: W) U3 m" B9 ^
+ J6 d: t& n3 U2 u多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。
* u$ a b$ q; O( t: d5 W2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX) n( b7 q- g5 C# M4 [
结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):
+ Q; e4 Z4 Y6 G, m$ f/ O6 E& j' U( u! M
区域 典型建设成本(壳体+机电,$M/MW) 备注
. R' t, v0 C4 I* R中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13]) Y6 u! n4 m5 l) ?
美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]( M+ o+ Z; i, S9 b. t% a
欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41]
3 ?8 l+ t6 P, `$ R% S" a# m中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20]
( r( a' P% K$ l' a5 l; r! [结论:
' c* S: a0 U) {' J4 j9 ?0 K4 z7 @! Q* L
单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。
2 a( @- L, S" v0 l* b& o( t$ ^若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。. X- J2 m# D0 s. N9 b2 a
2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例)
' M: P1 L5 X' Y以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:: y+ n9 J0 _% g1 @
. Z' S2 ^( |# }2 i9 P( y% k
假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;
$ |9 p! u7 Z A! D6 lGPU 配置:
8 j d4 o) b" S n6 V# _有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);
; ]- Q' u$ G Z& R& a, B1 r每 rack 成本 ≈ $3.0–3.35M[34][69];
; C; q5 i& I" U& r/ w5 NGPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。3 X7 m% f5 \5 z& _/ y
与不同区域壳体+机电组合:
, s) n5 S1 N x: b- }
" D+ T* X0 z$ G, D以中值估算:# l. E9 Z" E4 U6 Z. u' L4 }
' | ^4 N u$ T9 n% W
中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B
5 t* ]. S* `6 B* n, y& f% @美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B
# J5 _. j7 o+ Z( [欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B! T1 J6 L+ e9 _# j8 s" l
中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B+ ^' r( P. s4 k+ I4 ^, ?) w
可见:
7 B; L# F/ G& U' c; o) T7 I& l
% A% R6 ~! A8 V" ]GPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。
( `- u$ Q/ ]& O% Q* V相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。
* q% O4 K! |. t# P! G8 o& a三、运营期成本结构与区域对比
3 q W- Y9 A/ J7 C" v- I7 x- D3.1 通用 OPEX 结构(高密 AI DC). ]& M; Z, k! t3 _0 C) ]1 h8 B
结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:% [) ~* y/ R( e* Q
5 f- T) I: Y* p) ?7 c
电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。
' {. q8 \1 B1 E. w" e冷却与水资源:
/ q) I; ~* A, A' j/ T! V- [能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。
+ u+ W9 K5 ^5 ^2 W水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。2 K1 x8 S* H9 m) I8 X
人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。
$ }5 c8 ]- q& z托管/物业与维护:1 h' e" D8 `1 h2 W
托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];9 f( u1 l9 H/ y- s i/ Z
硬件维护:LenovoPress 模型中按设备价 12%/年[28]。
8 r7 K# N7 C) E! a3.2 区域差异(以 400MW / 3 年期为例)
$ x. X+ ^4 Z8 c# ^7 D* O使用 ChinaTalk 的电费与人工估算[1]:
2 V1 m/ s- p* A j+ N2 U
! {; S+ o$ M8 I电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:
% l/ D+ n- k1 U9 `# m# S中国:约 $0.06/kWh → 3 年电费 ≈ $350M* k* p! ~ O* o* ?2 K
美国:约 $0.09/kWh → 3 年电费 ≈ $600M
' K% U4 g7 T y+ W$ g) ~中东:约 $0.07–0.10/kWh → $400–550M& N, M! ]- N! X. Q! P
欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势)
; T% r$ L! e% B. T8 r水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:6 s4 ^: i& l" Q
美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]9 [3 S1 h5 W" S; a
三年水费级别:
5 R) B% n4 X; U1 q' @美国:$40k+
7 O) D$ C6 @+ X) R8 n4 P2 u中国:$20k+8 |* i5 ^6 j0 j
结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。
+ L+ H! y" h5 n+ t人员成本(3 年) – 假设 500 名全职运维: E' a: k/ V2 v
美国:500 × $120k × 3 = $180M+% Z# Z$ K( u1 F
中国:500 × $22k × 3 = $33M+
0 Z% Q% i( V7 S0 u# _差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。
: q7 T- F. t1 V) g整体 OPEX 粗算(3 年) – 400MW 场景下:
( z/ I. s' m% E) R- W. \: s! n3 a* Q" P8 C4 v
项目 中国 美国; M, U6 ]/ n% v- }+ _9 w
电费 $350M $600M- K" [+ q. ^( P) ~! W$ H
水费 <$0.05M <$0.05M
2 X/ M, l2 }0 Y1 l9 G人员 $33M $184M' B2 j: r* p1 J6 w1 K
其他维护/托管 同比例估算,地区差异主要体现在人工与地价
$ J3 f& D' B: C- L% @# c1 f# R结论:
$ v3 J4 S1 R! j& F* W! H: ?( J2 F$ b, L& k
就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。 D0 H' p0 E+ I7 V- y* W% p
对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。
" y3 v: S9 D7 ~3 W四、基于 token 的成本与利润推演( s5 o" D! V4 J) R; q/ P
4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元)0 V5 D" ~- n! h- X q7 E8 o0 }
统一假设:4 c: K) A# t5 R4 u* v+ L
; J8 J5 f( ]8 L( |- V/ K典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])
. u9 o& t0 f. s. U0 \1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh
f9 o. b9 `* i7 y4 Z' b% ~9 T( v; L1 百万 token:278 Wh = 0.278 kWh- }0 `& n: C+ {, {1 O
场景 A:美国电价 $0.30/kWh; W K& O" v) E7 d# F' k5 ^" n
电费/百万 token = 0.278 kWh × $0.30/kWh
5 o# }. W% x4 ^) X≈ $0.0834 / 百万 token
6 K e: u+ G* ?# B; x9 W7 l场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh
( {7 M, x2 i5 h! c: k6 j' r* @2 O电费/百万 token = 0.278 kWh × $0.042
# Q6 F. a5 N1 S. k* m9 R≈ $0.0117 / 百万 token1 J: d4 z5 t3 j# ~
对比当前 API 价格(OpenAI 2026Q1)[62]
4 s2 y* \8 t1 ]以输出侧为主(成本最敏感):
) g# g4 |: H0 ^; G3 S- A( H. L) Y# z" l. j0 k% o
模型 输出价 ($/百万 token)
- U7 ~2 K7 Y# {/ z7 X# pGPT‑5.2 $14, w4 l6 X6 \! D5 R
GPT‑5.2 Pro $168
0 o" z' d- u* D. a2 H- ]GPT‑4.1 $85 p j' k$ K' r+ B$ n2 U
GPT‑4o $10
. Y! H k5 S/ x+ Y) YGPT‑4o mini $0.60) |+ S. _ b; W, L, g1 Q
则:3 k3 Y, X& |6 {7 Z/ y; x! S$ K
: q ]$ S6 i4 ~. s }. N# L# b
在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。3 E7 c3 F/ ]1 K4 {$ G. b6 I
在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。
1 q7 ^2 @5 P) n2 n* |9 m相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。( l2 [+ h7 T2 J$ x A7 a. z
结论:
9 t G& d8 [) `5 f) J5 ^! |- S! l即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。( I! P6 X0 J# V6 n- T8 W7 x0 ?" q
8 z# c3 f. L3 [! h% T
4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO)
' A! s6 J0 P2 A) [; g7 U以 LenovoPress 的 8×H100 Config A 为例[28]:1 C0 m/ P/ l3 L
I# W) B: l) L5 @
5 年摊销下,8×H100 本地推理 70B 模型:8 K, b6 ~& J: n3 W
小时综合成本(CapEx摊销+Opex):$12.08/h
+ P0 m4 w5 b% \6 F3 W( \吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens! v$ p* l& C" q& `7 g
成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token
1 {* v4 @0 }( _9 O) C' H2 j电费在其中的占比:
$ a% Q+ y* u5 b5 }! H+ ~+ D, HOpex 6.37$/h 中电力+冷却约 $0.87/h[28]$ `7 |# Y3 a. g% H
电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token
$ ?3 C$ s( p5 B电费占 总 token 成本 ~7% 左右。
* Z7 C# M4 ]+ a& E: f若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。& P$ r- J: Q- [2 I
若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。
h. e+ ?. _1 r2 K
2 m& ~# v; A4 M, ]4 s因此:# E: e1 R" P) h
9 w# a! N! x$ O% s在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。
$ T- x$ j9 o9 {! K在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。, t+ c4 O. i! V+ q
五、不同芯片方案的建设与运营成本对比
+ ~% t) i' X1 q5 C5.1 NVIDIA 方案(H100/H200/B200/GB200)" e2 C2 v: Z9 l5 t
CAPEX:( k9 z+ l; h; ~ _- B3 J, h; ?2 _
; U$ D3 l* l/ s- d7 x% j6 GH100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。
8 }0 Q; J5 _. S: F3 Y5 {H200:显存提升,单卡价更高,8 卡节点约 $280k[28]。1 _% j# n; n" I
B200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。" G. h" f6 `5 k! ?4 U7 i
GB200 NVL72:
+ b5 t) z8 h7 a* R/ b5 B2 @每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。) t7 ?. N- h$ v$ T# L
冷却系统每 rack 额外 $50–56k[35]。, W4 M9 z9 G$ D0 \/ P9 a% ~
在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。: w. C- {! U$ j" z
OPEX & 能效:8 Y' p' a# ]$ ~' I4 @: _/ }) y
0 z1 d a% b: F单 GPU 功耗:$ }% R' S! @1 E8 \" F* W
H100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。
" |( Q9 Q r' p" l+ Z( Y9 IH200:功耗类似或稍高,但性能/W 提升[9][10]。
" z+ |* C8 Q( b( M1 f+ UB200:标称 1,000W TDP,但实测约 600W 左右[68][69]。
; J" m6 j3 D; f/ V) RToken 性能:
6 V" I( O2 z$ ]% J+ z" aB200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。3 w0 b Z$ q( w7 {0 g
NVIDIA 的优势:/ Q4 {% J* j; P! F
' V. _& A( r; _; D; a! p软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。$ @$ X. S* L! U8 J0 S" P
但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。2 {, \+ F6 i5 _5 \: ^" X/ }; K
5.2 Google TPU 方案
6 l* h! a4 }2 D3 M- e, K2 o# f7 pCAPEX:
L) y& X- }+ K- @# k2 M r- w- R- k; |; ^$ C/ J% q* F; Y Y2 O
单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。! t- b" ~& |1 l. k9 v2 l
GSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。
, y! _ T4 v2 g7 O( p# q8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。
: S$ Z) T; o/ s1 j. y能效:% @+ B- u' h: x' {9 ~! r# s% q
6 z1 M' j! \8 }! iTPU v5e vs H100:6 w9 Q& Y) m6 o( Q7 _9 C- j
同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。! I* C* M8 l/ y+ s
测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。, r) f; C- v+ {9 Y, _6 F2 `% f( f S
新一代 Trillium/TPU v7:
+ v7 ^6 x3 O8 B& v$ [能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。
( Z9 ~" E4 F3 p$ b. NGoogle 方案的特点:- S# y+ G% U' F2 A7 c
2 `# y0 }8 w6 w, B# z( T l
自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;
, r0 N4 B6 {5 L0 X/ E R对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。3 M3 J0 ^0 x& N9 |3 s
5.3 华为昇腾 910B / 910C 方案
" P2 T. C" w; BCAPEX:# L1 ^% u; w0 s( `9 l
& n! Y9 m+ c3 V; p' i单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。' M- g, f3 n6 f" G% W
与 A100 对比:6 W* |9 j% x" D) w0 w' V
FP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。
, }) K5 E) p% P' `+ A0 N6 J市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。" w/ a1 C& |! q& }5 R3 E. k6 n
使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。7 y' b8 A+ G2 t) y5 L6 f5 C
OPEX & 能效:2 w- `: h2 c% b* h8 i9 x; X' n" p
+ `0 g% _1 z4 `! |
910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。
% H7 I. w: d' \8 {5 v8 ]部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。$ t8 X0 F6 k- V3 L# Z. K! }0 o- o$ z
在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。+ B! h$ q5 I" ]: b5 j G+ r% @- T& E
5.4 平头哥真武 810E(PPU)方案& ^% [( }5 J- V0 G* ]& M
CAPEX:- M! L7 I& P. F/ G
( W9 B& t! Y0 b
技术参数:7 o( l. [; Q7 W S# f
96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。
& y w' c4 e' h性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。
9 U! I! w" I5 _$ p价格:3 N# u0 q) b0 _0 k- v1 S" E6 z
未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。
, o8 _4 n/ X( e5 b结合国内报道:
+ [7 z/ k. e# l; C# K2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。1 |+ O& r) E# u# p1 Y# P
数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。
6 C( H, D7 P' r' {* n& uOPEX & 能效:0 C. z5 S+ ~' r
" M" i& W# _2 y7 K400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;1 c/ e% m. R$ v7 b
在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。 w6 X; a7 w/ r1 Y0 F# {$ z. \+ G
六、综合比较与策略建议
: g. j, S4 C, T& b6.1 区域维度:在哪里建 AI 数据中心?3 }; O& H. P1 M8 i7 u' V; i: E
纯经济性(TCO/tokens)排序(假设无政策/合规约束):
. A$ n7 P2 E2 W% i# d6 K' g5 Y) f# H7 v
中国西部/北部(电价低、人力低、建设成本低)
9 h7 c. ?6 X+ V7 z) F# b中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)( [ K/ R! \% J+ a
美国电价低但人工高;东海岸/加州电价上涨压力大
2 w. [! m; v3 X5 H& n4 u& P$ _欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求
: h3 J: N% \' C2 b' t若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:/ T+ m$ B' n$ u4 l0 O6 \' b* r
; ^3 r- ~0 b9 V0 O6 ?# n6 j纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;
4 t; e: ?" E z, d对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;
7 A* |3 K x& X: w- Z& F但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。
5 Q7 S# | }# u Y6.2 技术栈维度:选哪家芯片/云栈?7 A$ J' B W; C R7 j z
若目标是全球最优 tokens/$ 且不受出口管制:
. d. K! F: R9 e, I7 b, x
, O# t1 z* z1 i; OGoogle TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。
- V. D+ l. u5 X0 q& ]) h若在美国/欧洲,能自由采购 NVIDIA:5 U+ D9 \! y) ^% [: Q$ T6 t& C
, u- V+ h* g7 h2 ~( I# C$ w' Y短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:
8 e0 h1 d7 [6 R3 X3 ~! A: P: V成熟的软件栈与生态,极高的 tokens/s/GPU;
% A) ~' o S l4 l. @在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本;
1 F: m, R8 n/ L! [+ L( b但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。
6 q4 R2 G" ]! u V( Y/ m9 S1 O若在中国或存在出口管制约束:3 E# `4 A: t2 g
, C7 h+ x6 G5 m2 w7 Y昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:
+ T& C. K6 Y& U, ?3 F性能上已能覆盖大部分 GPT‑4 类推理需求;6 {4 J0 k! T- Q1 K5 @& [9 R, u
单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;0 r9 h& m9 l+ q& ]
软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;
6 P: Q- Z3 |' K" x建议配合:: a0 R# G5 g* S- S; j; y2 A R
高效液冷(PUE~1.1)、
; `6 l' M9 u1 Q9 g8 a& ?& M大 batch、路由(浅层任务走小模型/低成本芯片)、
! H2 H: P2 G' B3 O强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。
/ r! S/ |, Q) z8 |$ ^6 a长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:
+ k& _( i$ g: v, I) n) i. R7 d2 o2 I H( K7 c; u
数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];
5 n, D9 x# R: t# Z+ g这意味着:; z1 L5 U$ I0 V8 U- h
优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);+ u9 Q' l; c( d9 x- x5 h H6 }
精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。
R, Y4 p1 C F- }; _6.3 针对你关心的具体问题的简要回答7 l% w7 h2 L$ X" D
AI 数据中心建设 vs 运营成本的大体比例?
. F Y# U" `" M' t _5 W9 s$ ?, ^- s6 B
在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。
& G0 h0 {$ n4 `+ N4 j其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。7 s" d% B( e. @4 ~3 ^
中国、美国、欧洲、中东的成本结构区别?$ z; R& K0 A8 U
& ~. y# d4 R- O; T+ p% D+ d6 ^' @7 T% X
建设期:3 n. q, Q* T7 D! f6 }) a0 u( c9 _
中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。: f' K3 O% s9 ^
运营期:
" `, s- L2 A4 B( Z5 ^$ I! \0 O电价:中东 ≈ 中国西部 < 美国平均 < 欧洲2 l3 Y* B J. l
人工:中 国 ≪ 美 欧,中东居中。( |! e0 r ^( \: d' A" `/ v' v- R
在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?8 ~8 x; ?3 G- Y+ L
/ E0 Z. @0 r5 m+ V
对于典型 1 J/token 推理负载:% `5 _* `9 O% V4 ^ T9 Y, |
美国 $0.30/kWh:电费约 $0.083/M token
# ~- J- E+ }! M8 I2 Q) ?中国 0.3 元/kWh:电费约 $0.012/M token) [* b- p7 I" s6 @9 L( J! S# p
对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。
0 N m6 V; o Q不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?8 r F! I5 O5 ^4 b' A, z
- w- S/ Z, m9 q4 V1 n4 F* C0 c在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;
5 o" D4 n: S. W+ E1 F4 R0 Z全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;
5 J1 j) `/ a: k! W* V中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|