TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:5 Q! y* D; u6 o
4 Q6 E4 F; r: G y& F0 c一、总体分析框架与核心结论
) Y, B" D0 @$ b# [1.1 分析框架概览
" \4 Y) B4 B2 h1 Z9 Q拆分维度4 t$ N3 P# X% h B0 U
# |! \1 R: W# q P4 e+ S0 Y% T' Y
阶段:
% P/ I- h6 l& q* ? y建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施" X! ^) g, u: k. A& d
运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等
3 q$ j% C8 W8 U区域:
- d- x+ k2 f5 `+ ?% z% g中国、美国、欧洲、中东(以海湾地区/UAE 为代表)
- P2 } X2 R6 X技术方案:9 g. N" i/ ~( `* k4 M- u9 s
NVIDIA(H100 / H200 / B200 / GB200 NVL72 等)
( \5 h( s' ^2 ]Google TPU(v5e/v5p/Trillium 等)
, t) o6 ]+ z; r2 ~8 V, S中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)
O& j* H6 H9 f2 x! R$ [+ [算例基准
1 p" J/ S+ g0 F0 y' a e8 [+ A" L3 g. A, g6 K) g |
以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:: l& ^$ R" [! [1 E5 a1 I! w
其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW
8 a" W4 T1 ^2 a; \' R4 f UPUE 假设约 1.11(高效液冷场景)[1][29]
( D1 T m8 [, a2 X3 I- q" m时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28]
y# }, d$ t; n% C关键指标& J' N2 Q J' q. s" ?# J
' B7 X; p- f3 I
$/MW 建设成本(含/不含 IT 硬件)9 ]/ r* D' [( X$ A7 |9 ]
$/kWh 电力成本、L/kWh 水耗6 f2 q) F- M- g) z/ M
$/token 或 $/百万 token 的综合成本
" v4 Q% j8 |: I! | \5 c# h) |Token-per-watt / Joule-per-token 作为能效基准[17][18][26]9 Q9 [% a* J. x; N% h9 L; E/ d
项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租)% R8 W, C. q: z: y* t7 d, X
1.2 高层结论(供决策快速参考)! V1 Q8 K( g' P" `' D* Y9 z
建设成本:AI 数据中心相对传统云数据中心成本翻倍9 |3 A& s$ n/ q, \/ i6 P* j9 H( ~8 H+ N
R8 H- T6 _/ L, L传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。! r2 Q- V- C. r7 t2 W
AI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。 q7 q4 S: P5 |( o
按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。3 Q9 U( \0 \8 v" x% R" W9 `# [
区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区0 G" \: `; a/ W7 M3 v/ X
3 T8 _' Q2 Z2 d( R
中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13]1 O+ Z. w! \/ }) \7 B b
美国:$8–12M/MW,400 MW 约 $4.0B[1]. d8 J" c- x1 i) ^
欧洲:接近全球平均 $10.7–11.3M/MW[2][41]$ x: x* H( Q, N9 R# X2 \
中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]
6 I' F9 l" i! A- T, H结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。$ w* n& N1 k! p% ^$ L
OPEX:电价与人工决定区域优势5 _+ X: V/ @, l- z1 Q! J
P% S8 F8 }% f r
电价(2025–2026 工商业大致区间):7 [* e4 v+ p) m5 r* [
中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]
: y$ r3 u% H A: @3 _, b0 X- S+ V6 A美国:工业用电约 $0.085–0.09/kWh[44]+ D& r# r5 Q- d, `& A3 Y ?/ {
欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]
) ? @5 ^+ ?0 f中东/UAE:工业用户 $0.07–0.13/kWh[47]
- x+ A. N* w7 X4 m0 U7 \& e人工:
+ V% B1 C% u$ Z. w2 n, l4 B中国数据中心运维:约 $22k/人/年
. k9 @3 K+ `$ q! \, v美国数据中心运维:约 $120k/人/年[1]
9 d h1 |; X- R结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。
+ a. o6 S! D7 T& k能耗与每 token 能源成本:能效差异远大于电价差异
4 l1 _ a$ Z3 M
0 s3 \$ h+ W$ B, n. M6 @7 m$ l; oIEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。
" @. E/ G! Q7 F大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。
" p7 l* s) T5 ]: q) n) k; F将 token 能耗约化为统一口径:. ]$ D; A# N) @, v! K/ l3 A
粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:
/ D9 g+ `1 I+ H中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token& A7 E' F4 M& Q! Z+ w0 x
美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token' G5 @. K! X9 l4 b/ \9 y* R
对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。7 ^4 r( Y. d. H# d4 {
不同芯片方案的核心差异. S6 k @( ^6 n w
9 A3 _- Z, _* R5 a' z$ _
NVIDIA Blackwell/B200 & GB200 NVL72:
+ @2 |0 K% r; o: Z& K2 u# {( o' S$ S单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。' Q: N# e) I3 J) e. J2 X6 u
GB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。
5 ~& Y \' g( v; `Google TPU v5e/v5p/Trillium:
( g; m0 _+ F9 X) `1 y2 J$ a) E) v8 TTPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。
$ D1 y4 R1 J# Z7 P# WGoogle 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。) N$ j# I" y# t" k$ {# h
华为昇腾 910B:
/ T/ u1 T, r, r! }$ l& r; m% zFP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。; \ D1 V: }2 N' N# F/ L2 u5 D
单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。
8 c( Y7 R6 B) O' q2 S阿里平头哥真武 810E(Zhenwu PPU):! t: p# {. ^, X4 v2 v E7 _+ t& e$ T
96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。
3 t5 ]" h& w3 F3 f9 m+ s结论:& E$ e5 h P. K( h V% T
能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。8 z4 D; A8 m6 O v/ _+ c8 }. }
单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。
. e6 }* i3 E( B0 V对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。( E. t( ~1 K0 O4 l% f) \( c) f
自建 vs 云租的 TCO 与 token 成本. `% ^$ p T4 ]' x; h0 N4 X
# i4 y7 A& }) c5 A8 `9 `! U; g
LenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:
1 d6 q& @1 H% [, x, o8×B300(Config D)自建 5 年 TCO ≈ $1.01M;. A4 {$ K( s1 y2 C! V
等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。
: @) m$ p. Q. L3 M3 @+ K$ Q8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。
1 z/ B! f' l! a u/ H# NToken 成本对比示例(LenovoPress 场景)[28]:/ K5 E5 A% M* k& l; C$ W: }& X. R
Llama‑70B 推理,8×H100 本地:约 $0.11/百万 token, t6 n, b8 ^; @7 N& i
vs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。1 b, i$ f0 o+ u/ P2 e" x2 p
同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。
. v3 k* `& z& ^. y6 d+ ]! K. r5 lLlama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。
F( c7 P' g5 w8 P结论:
5 y, M- ?1 P! ^高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。6 c% G, d$ [8 c. H! u( n# h
Token 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。
, }5 y i8 r! _- N二、建设期成本分布:区域对比1 m; _1 J! T# f5 f* k& T
以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。
! {+ u2 U/ `: Y7 t
' z0 _9 W4 {: L) T) c2.1 全球/通用结构(以 1 MW 为单位)0 L! S+ R# I( r' V6 m2 x
综合 JLL、ConstructElements 等[2][41][40]:4 Z4 h0 |7 a5 P/ d- X* c8 m
( ?* c' S& J+ \' E( E+ p2 ?: W
壳体+机电(Shell & Core)
5 I A# G6 y3 L. H# c8 O
$ V$ n' J9 O; z& a- m" ^全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]
; B2 K/ f0 z% Z4 F& V3 W8 } ~其中按成本构成[40]:3 Y9 ~1 w, m' x. b! e
电力系统(变电、配电、UPS、母线等):40–50%* O6 `! _4 S+ W- S
机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%
) b; ]) R2 {' L, T2 w0 E建筑与土地、结构:约 15–20%( w6 s+ Q/ W& L7 n
其他(消防、安防、楼宇管理等):约 10–15%3 @& z, R: o0 p' I+ q5 o. w
IT 内装与 AI 基础设施(不含芯片)- X% [& O; @ d6 m0 A) i9 \
" N. r; e, n, R; Q高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。6 Q/ ^0 a" Z, K3 n" R
GPU/加速卡硬件 CAPEX
4 j& r0 i/ S! f5 b* H Y7 a. _0 m. T- l8 x8 Z7 p" s! V
多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。 Q* \! F8 Q( r1 W; k0 u! a
2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX, D" z5 v& R4 r: T- `8 ]
结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):, E n2 C" v3 k4 ~/ O# W
) k; F* b0 ~3 Z' ]+ I' X9 C) F: g区域 典型建设成本(壳体+机电,$M/MW) 备注
$ R' I& z- G; ? K' `" v2 s& F中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13]' \6 }- r; H& F9 F5 S; S
美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]/ T, [/ ?! z% p8 B
欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41]5 S. q7 d' ~" O
中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20]
; I* u0 ]; |# _3 _- Y* b结论:, Z. q9 N# {; G5 o
4 b4 P! r4 Q* \4 C单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。7 v" Z0 F, c) W/ `. L- \: G1 M
若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。9 {; m# b* {- Z" v8 j! S1 t" D
2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例)* i) P) g# U+ z/ b3 m
以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:8 v0 e' j- f/ L
- {! l9 @7 \; V; V4 P' s; U' P
假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;* R! z2 i7 u; w% E; X
GPU 配置:4 E p% T6 Y8 A" [6 x0 ~$ \
有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);
, K! {5 d5 W& j每 rack 成本 ≈ $3.0–3.35M[34][69];/ g) x" q, P8 X( @3 I) f
GPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。
# `9 L6 p7 F- t0 e( X x与不同区域壳体+机电组合:
6 }, A+ _% H7 @" l1 F0 s! q# M2 H* d9 M# e8 n3 Y! M1 X
以中值估算:3 v/ h) V& O$ l) X' M9 N' O
) |# a* R' k% m& n. G _( R; @
中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B
D" q$ p$ w: J- o美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B$ Y. `4 H E. E( E
欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B0 Y( k; |% v1 Y K: Z, q
中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B a, v r! K, {, g% S
可见:
1 W! a# K" A( u' ^' y& o3 \
% _' l+ [" O6 ~8 Z9 M, M8 TGPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。2 y7 M$ C: w, M1 m! P$ ?8 A
相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。
0 O+ X9 C, T6 h O x; g5 r三、运营期成本结构与区域对比1 ]' P+ t& R+ u1 k9 E5 p& j
3.1 通用 OPEX 结构(高密 AI DC)! N1 ^$ V! M7 j6 H
结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:% O) n- Y: n; G% B
k0 `) L4 u$ D
电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。( o1 w3 b% \% i) B
冷却与水资源:+ s5 G' p' U$ k6 B* T7 z" C
能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。
* j5 j. Q3 L1 }+ [- U0 A5 b! i水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。1 l% d% f! n8 G$ O5 ^
人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。) k5 F) L3 M& n5 m$ M
托管/物业与维护:7 F: K- J" c$ \" A1 t
托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];( x# j+ a; y! v) M/ B2 B) ~( n
硬件维护:LenovoPress 模型中按设备价 12%/年[28]。5 l. o5 p( |9 V7 b$ l+ {) }% k( p! G
3.2 区域差异(以 400MW / 3 年期为例)8 t" N: ]2 u* k4 `+ Q$ ~
使用 ChinaTalk 的电费与人工估算[1]:' F7 x A8 B( F( l' W
2 d6 M' i" K% x- c3 \. |3 O电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:+ }! n$ O# m6 H, \
中国:约 $0.06/kWh → 3 年电费 ≈ $350M( B1 B( u: R' X `& f/ M% c. I% X
美国:约 $0.09/kWh → 3 年电费 ≈ $600M
7 L' i$ b) |8 w Q8 R中东:约 $0.07–0.10/kWh → $400–550M
' z. c h7 G+ u9 N0 x欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势)
& T$ E7 `( N8 |+ ?水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:
" L( T( n, e) B; }美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]
6 C- w' W/ n+ T; K三年水费级别:9 G1 s6 o3 [# V6 S" Q& F: K0 H
美国:$40k+; L9 o/ n" c* ]3 U: x0 Q5 j3 ]3 |/ A) r
中国:$20k+" F5 W. I3 o# I) F1 G: [
结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。
; M; K5 D/ t7 Y: B3 i( p+ _人员成本(3 年) – 假设 500 名全职运维:
& ]$ {* j/ C* u! ]: G美国:500 × $120k × 3 = $180M+
: G% [1 s! M0 V, e, |中国:500 × $22k × 3 = $33M+0 G, `9 O2 c" L4 S" l9 f5 {
差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。3 l5 X" J( B# `2 F4 Y- B
整体 OPEX 粗算(3 年) – 400MW 场景下:
) X3 y- k! }6 o5 Q$ u9 N; l9 ^* Z; V/ p) l n3 i6 Q
项目 中国 美国
3 z- L' B& h! V& P. c电费 $350M $600M
" A. f `! i& j6 c g5 a n水费 <$0.05M <$0.05M
- y2 K. R: A) b8 e0 x+ ^' G人员 $33M $184M# d* z. c& e/ l% m% C8 T
其他维护/托管 同比例估算,地区差异主要体现在人工与地价
6 D6 [1 C* U' S5 O* C/ b8 @) ]结论:/ j' i' o0 x6 @, Z7 O5 g
) j8 ~9 n4 g0 C' r2 ]) ?* o
就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。
# p) u) _+ a- @- `7 h; F+ V2 |对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。
5 F7 ~$ P3 U( p% y四、基于 token 的成本与利润推演
) W# q: k/ P( g0 G9 {4 b4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元)
$ Q* E$ E; F8 ~& E" P统一假设:
, n8 f& F" Y* }, a$ w0 L+ @
+ j% `, G, r3 X9 i. \' {典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])
* L- A2 k4 r* W: U! s1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh
9 e% ?) p6 F, _* f1 百万 token:278 Wh = 0.278 kWh
0 N7 Y$ ^, e# }3 P; t$ B2 U3 q2 u场景 A:美国电价 $0.30/kWh
/ ~. d! W. X8 s电费/百万 token = 0.278 kWh × $0.30/kWh5 G/ b2 H: N4 l0 S) }
≈ $0.0834 / 百万 token
# e/ y4 t' a, w# k. C场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh* Y1 }' q) c! i- ? I9 |$ F$ n+ N
电费/百万 token = 0.278 kWh × $0.042( h; c0 v. w: h! A% `
≈ $0.0117 / 百万 token% [0 h/ O: i3 I
对比当前 API 价格(OpenAI 2026Q1)[62]
8 x4 R8 e, C& K, y+ W, _以输出侧为主(成本最敏感):* k/ T, j2 j) h Q: ]* M: M
9 R" C: `% q* [; M2 f% W3 X
模型 输出价 ($/百万 token)6 ?# ?# M" r$ @# S
GPT‑5.2 $14
. ^# P6 p. i; D; L( g* JGPT‑5.2 Pro $168
/ L! s* V8 _0 ^) b8 U$ GGPT‑4.1 $88 m/ l; O, z T! f/ s6 d" V
GPT‑4o $10
' b: `+ E7 u8 |* UGPT‑4o mini $0.60+ X" _8 o8 a. \- q% H; R
则:
9 M/ d$ u, s8 o, K( d! l
" I1 Y8 v# @/ {4 E在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。
& U: y- M; b# W! A. g0 z在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。# U% \7 f A" b2 E
相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。, M: [* B U& Y) `/ q1 C" _5 w
结论:3 n- G# H9 ^6 H0 e( Q/ _* Q
即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。. T4 q. y2 C7 ^3 q1 ]2 ?1 h2 X! n
+ j7 V# i# a: G8 t- \0 I4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO)
- r( k$ V |1 @以 LenovoPress 的 8×H100 Config A 为例[28]:
- s! ?- G9 p0 R+ K |! m1 j6 S
+ l/ A" k+ _/ b/ N5 年摊销下,8×H100 本地推理 70B 模型:
$ T; x0 C- C" f( y小时综合成本(CapEx摊销+Opex):$12.08/h
: i4 q& @; m( r. b吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens
& P7 M! P; W. A成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token
! }) A; B0 {( ^8 G电费在其中的占比:( K! h4 V, G8 D6 T0 m( u0 }% u z
Opex 6.37$/h 中电力+冷却约 $0.87/h[28]
6 n3 [2 L6 i6 p9 t' L: o1 r电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token
: p6 V& R$ K& s8 V电费占 总 token 成本 ~7% 左右。' H. I2 o8 Y1 {3 k/ r
若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。
$ y/ _8 i! s, H1 p若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。
1 ~ K" {" \) o8 N5 @
) v% b2 K" w" J- U因此:. o, l4 |6 S" s0 Y" w4 z+ G( L
+ z p% \& b- ~1 G+ C5 _在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。
1 o0 |0 P0 A& I8 Y2 ^( K0 [在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。
, ]1 c6 m, u. |; G4 A五、不同芯片方案的建设与运营成本对比
( E* @0 u4 }. `& x ?5 l5.1 NVIDIA 方案(H100/H200/B200/GB200)
7 ~- @/ W: \4 n# D& WCAPEX:/ K) ^$ G' I& R9 i. M2 u
0 y& t% A/ B' Y- q, @2 N
H100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。
- J( b0 L3 P) a8 ^4 n/ |H200:显存提升,单卡价更高,8 卡节点约 $280k[28]。
+ A1 n I b& LB200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。. @9 j# |2 t! A+ ?5 @
GB200 NVL72:
/ n' e0 V+ S ~; ~& j* z' v8 T; u每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。 R. T" S6 U6 S# G2 H. G& g& g
冷却系统每 rack 额外 $50–56k[35]。
" W2 g( V* [" E; m4 N. f在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。9 F8 ~: {4 L6 S8 w! B
OPEX & 能效:3 g. l( X. M( L6 ^2 H; N; y p% r
% T4 w' R+ W( C9 y/ X单 GPU 功耗:* a# i" L: {( t( ^
H100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。7 x6 u) g& K3 ^3 m' W
H200:功耗类似或稍高,但性能/W 提升[9][10]。
; q) x) u+ e5 \6 HB200:标称 1,000W TDP,但实测约 600W 左右[68][69]。# O1 V/ b, R9 T- i/ x
Token 性能:8 C1 L, o# q3 r- i
B200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。
" R$ u( k# {& W* ]' V5 c" dNVIDIA 的优势:
! @' n# m3 X4 N( r" x( J
: E% G3 a" m2 E- N) q6 L软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。: d t8 Z9 G2 d
但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。% W3 s; x7 ~0 ~7 y: V$ Y
5.2 Google TPU 方案
% g& l3 H0 k; M& j4 w" zCAPEX:
5 L+ [% f, C+ _4 [1 Y0 d# O! X
+ I! s- V& ~8 `' w2 N单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。. f! i5 z0 q1 l# J! @' K5 h
GSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。( s/ Q' T& \ @ v4 l* \
8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。
' S1 _9 e5 u! _) r能效:( |1 W. Y' S- |( }; A' b# N
+ p3 }: n! R, l$ [
TPU v5e vs H100:
0 M- s( c: K$ P; S! |$ s& A同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。5 V7 I- s* H! t( J/ x3 A, s
测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。
# b* @" C0 b- E7 [' M- H7 i新一代 Trillium/TPU v7:
$ v- `5 Y" `1 Q7 n2 v8 A能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。+ i- G. z' A; z
Google 方案的特点:5 Z# @; \. ]: K$ ~, P2 p
7 x1 H X2 r7 r) P$ z$ W! Y自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;8 |8 ?9 i [% u, a) X3 S- G( G
对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。0 I; F* G+ B2 ~' i& U! q
5.3 华为昇腾 910B / 910C 方案5 N, F: X5 K- G0 q+ K. W
CAPEX:
( u- z5 \9 M. ]) B4 i3 v3 D
; G8 t5 N& z+ q: ]7 h2 A单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。) d* R# S* k% T1 Q! U
与 A100 对比:
' A+ l7 k: ~/ Q G$ |% m& T, a# n3 @FP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。
5 O, W. s9 u# ^- t市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。. v& y2 c9 a! g: w1 Q: ]5 G: `2 T
使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。
5 K5 N) v) [* y7 s6 E& w, NOPEX & 能效:
9 J+ L& q0 W! J$ Z- Z$ l/ s- X8 A/ H9 D8 E5 V/ r0 H
910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。. F3 r- {! o! N+ i! r: d c
部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。
3 q. }9 D/ x& H6 T2 U( z0 A2 m在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。" O, i2 `- b9 v! n5 I# W, w
5.4 平头哥真武 810E(PPU)方案$ C+ T |4 c8 m" w8 l2 |, \6 W
CAPEX:* f2 d: D& Z* R: ^4 R: [1 U# Y2 R+ u
0 P/ \7 {4 Z+ C技术参数:
' C; ] z' h% f' I6 _96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。
% j' ~* o* s* @性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。. b4 d; `4 P8 ~" O+ M
价格:6 v5 Q3 J# T. l$ a( l. p; e1 ]
未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。
+ ~. Z9 `0 P& f结合国内报道:
( ?4 P5 f. k! P( U+ T! h+ d/ c$ }2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。
" ^; }/ t4 j" q, r% |数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。. R7 a x* y/ {* P S Z. M6 ~
OPEX & 能效:' m& i+ a3 W# a* K. R; a
! k1 P8 A) U/ a% S400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;
) w' Z; b: \3 i$ Y/ B在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。
1 Z' c8 t& i3 z1 |+ a5 \0 J: g六、综合比较与策略建议; o2 L) [0 N8 J2 u
6.1 区域维度:在哪里建 AI 数据中心?
0 t+ N& f7 x% Z+ m8 X7 u纯经济性(TCO/tokens)排序(假设无政策/合规约束):3 Q3 _3 i6 K3 w3 @9 [
: l: N8 Z+ Z) {+ |$ e+ Y5 W" t7 r中国西部/北部(电价低、人力低、建设成本低)
: z5 x Y1 J! q6 g; E$ J中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)/ B1 R/ i" q. G1 ~
美国电价低但人工高;东海岸/加州电价上涨压力大2 t" g9 T4 n* S7 h8 v
欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求0 U S1 F- C" F3 D, M$ ~9 J v
若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:
" a) U. k! X4 }5 }5 V% z3 }% k5 r2 R1 n) j: k
纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;
; y* u. M5 u/ s' R6 Y) x7 s3 g8 ]对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;
5 y- K: i' D% |4 b/ w' c6 B' [但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。
7 G! K& f6 V6 n8 p& H, L1 W5 Q6.2 技术栈维度:选哪家芯片/云栈?+ V4 s- p+ o+ Y% R
若目标是全球最优 tokens/$ 且不受出口管制:& y$ k1 R' j4 N1 D3 n
6 \: V- U% U8 U0 F% q) X" X
Google TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。" g" f) c {! g1 j4 W' i: _
若在美国/欧洲,能自由采购 NVIDIA:* \1 o, V; s/ R! k; H
6 t. f) j) \" L- q$ u+ i1 ^3 o+ d短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:# Q# m$ b' E# a& A* J( p
成熟的软件栈与生态,极高的 tokens/s/GPU;# I% z2 S. b+ Z0 O: L* F2 I3 p6 @) [
在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本;
$ Z( J6 C" \+ N但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。
9 P1 I) U _& x9 Z" o9 s( i: q% O若在中国或存在出口管制约束:
: j' I \1 R, a0 h: x1 g: y4 ^/ f* z9 h+ n, Z
昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:9 y" I& z4 ] g1 t8 Q
性能上已能覆盖大部分 GPT‑4 类推理需求;
+ ~$ d1 w& i# _( R2 d4 Z单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;% [- b4 K$ V' J z/ S8 M
软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;8 K+ r, v$ A1 _8 G% b7 S7 R+ w9 `
建议配合:7 O/ ~. g" j" d ]; j. V$ O b
高效液冷(PUE~1.1)、
6 D5 ^& r: Y4 X1 j大 batch、路由(浅层任务走小模型/低成本芯片)、+ j. i4 Y8 l8 B$ d" r# A7 T2 j
强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。) P" c; i1 w6 s6 R* B# k
长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:& Q. P/ ?$ c' Z" k* x) ?3 G( K
9 ?3 k% ^9 _5 m0 u7 C) a: R1 S+ E数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];
/ n0 F" i- t) |/ W这意味着:
# V' b* g: ^# ]0 Q, {/ }优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);! ^; ~5 r3 A& n0 q: x" g E
精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。
k3 q$ h! I9 Y% ]/ N- M! x5 F3 w8 s6.3 针对你关心的具体问题的简要回答
6 G- M% D' m; G+ J7 t" i7 B( x1 rAI 数据中心建设 vs 运营成本的大体比例?
# L2 T5 [6 T7 d4 ^* n/ `, T
/ Y" Y& P% c4 d; o) T$ ~/ t4 k在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。
; Q- W1 K4 T# A: y7 G# e其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。
$ h- k' J# p- T/ \6 M" [中国、美国、欧洲、中东的成本结构区别?
8 k% V, `( _, X9 G4 O- G7 R1 Z
9 K$ H6 k& \4 O4 b建设期:
9 |$ @) K4 ?4 k) W$ A- m中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。
1 i6 G8 W. s8 Y# U& j/ K8 a5 w& J运营期:
4 }! S; i5 j) `! ^1 D- ]电价:中东 ≈ 中国西部 < 美国平均 < 欧洲
4 v# L; g; Y' D* l. ]0 I+ A. A; v* w人工:中 国 ≪ 美 欧,中东居中。
g" r5 Q- J9 L$ L( D1 | |0 q: t在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?5 I% E) y4 r+ q6 N; u9 g
* z, W: L! r" Y5 t6 Y: S5 ~
对于典型 1 J/token 推理负载:
! g! z( F; E ?: `美国 $0.30/kWh:电费约 $0.083/M token( k4 @4 f. J6 [: u1 ^
中国 0.3 元/kWh:电费约 $0.012/M token$ k5 P0 h/ d9 c9 }0 J6 u
对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。+ t/ v1 W7 i/ ^$ i1 Q
不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?
0 U: E1 A- H C! p9 F; C7 W6 d
( S; b: _4 H$ \- Q" ]在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;
. g1 x9 P! P# v: o5 c5 [# L全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;
: z i( r4 w% D" v( C/ M$ T中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|