TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:
. r% V9 b) R; n% }
8 @2 z C( w+ h, Z, B一、总体分析框架与核心结论
+ M7 ]" @' _, U* {# L1.1 分析框架概览
/ y7 i" f4 i5 N2 N) e7 W拆分维度
1 R7 T x! p! k' }! z3 C
# L8 m4 H2 b, p. J. r阶段:, u* A6 \. S; V+ O* R0 e
建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施* s( v, F# g% e/ S P' p9 i2 q# I
运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等! ?1 @) P! `. a8 g* X" l4 a; F0 ~
区域:. O' [& Z; t4 S5 u" O F
中国、美国、欧洲、中东(以海湾地区/UAE 为代表)
9 U- O( Z2 N) \$ F技术方案:
& G3 I ?/ ]8 s: LNVIDIA(H100 / H200 / B200 / GB200 NVL72 等). }- o' _, m4 H) x" d! k
Google TPU(v5e/v5p/Trillium 等)
. u3 Y( L+ g7 O' b! V, l" J+ W中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)
! `% N# a. @4 Y% i算例基准4 l: ~5 J D! n
) p% [* j. w+ j: p以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:
) V9 i1 @/ }% j$ X( h其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW! U, o! N/ f7 Y# S+ f) g$ o
PUE 假设约 1.11(高效液冷场景)[1][29]
( G# Q6 j- \1 O2 n9 [2 x+ C时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28]& `+ w n) F9 x! P& R. Y S) S
关键指标
$ E( ~% `* @2 [* o o0 k4 Y s# s+ O. V( R2 _" d
$/MW 建设成本(含/不含 IT 硬件)
) b0 O/ U _/ m( Z7 [4 h$/kWh 电力成本、L/kWh 水耗
: H; c; B# |& h6 k$/token 或 $/百万 token 的综合成本
1 ?. V" E. h7 J+ M$ [4 N; n& V" ^& fToken-per-watt / Joule-per-token 作为能效基准[17][18][26], a4 `0 v, Z# N& g$ X! |* I
项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租). _: o R2 Y( \* H
1.2 高层结论(供决策快速参考)% G. t3 E K3 V
建设成本:AI 数据中心相对传统云数据中心成本翻倍6 \) q2 w+ W' \/ R" `
8 G" |# v( Y [, d. H9 {
传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。& N" O8 m& d/ [. g& }: l$ x: s
AI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。& u7 ^# ~0 y% c4 |6 H& N( A
按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。* W r0 ]/ z% q3 Z$ K9 C7 T* C
区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区
, l5 ^) x7 o( {7 S1 C; X2 _/ I" L) \7 M0 ^4 J
中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13]5 e1 t0 t5 Q: {/ A
美国:$8–12M/MW,400 MW 约 $4.0B[1]
1 [$ u* T4 D5 [/ |欧洲:接近全球平均 $10.7–11.3M/MW[2][41]. i( n; k' {; j7 P
中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]
* d. \ S/ o, Y# k结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。
2 V; r3 C& ~' Z: s7 O, H8 JOPEX:电价与人工决定区域优势
* j( D4 k3 Y7 \; W+ ^8 _# j
) Z6 `7 c# p) |$ r9 N0 Y& n电价(2025–2026 工商业大致区间):, p& Q: E& n0 q! g1 D8 [
中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]5 F5 R9 @/ Y0 @& |
美国:工业用电约 $0.085–0.09/kWh[44]
2 \4 _: P4 Z1 T% b( w% u& n& X欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]# a3 X) y" b8 }0 W U
中东/UAE:工业用户 $0.07–0.13/kWh[47]4 O- M: x8 \) M1 y9 [# i- s* E
人工:% D, e6 x9 R& G
中国数据中心运维:约 $22k/人/年3 u* l- T. d. D/ V& x9 |
美国数据中心运维:约 $120k/人/年[1]% A0 ^% v1 T- ^
结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。
, @$ J- z( S$ P8 K- m" L能耗与每 token 能源成本:能效差异远大于电价差异
2 x* u5 u* f( }8 r+ K8 k3 H6 e- d- A A8 U4 r1 Z
IEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。
0 ^ ?8 i8 ?# `) T大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。
7 {% }, G- H/ l; ?1 ^将 token 能耗约化为统一口径:# o- R1 d$ C4 e( e% j9 O( Y) B
粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:: W- [0 V+ v2 b8 x+ d
中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token
. a2 |" B6 [" D, s2 T% |* D1 M美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token! H1 ], q8 t) V5 p9 Q
对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。3 B; \8 m* [! j0 w% ~' J
不同芯片方案的核心差异
/ }& H/ i* G7 c9 I' B9 m, V
P+ G. y# q* ]NVIDIA Blackwell/B200 & GB200 NVL72:
7 ?8 R3 H4 y6 y$ Q; M5 u3 |; i单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。
- G. ~! t! i) W( D6 XGB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。
# ^4 g0 e" y$ T f" _) `7 wGoogle TPU v5e/v5p/Trillium:
& M+ m% q1 Q3 c4 B; q# O3 C' Z% VTPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。3 g" ~& m7 y& Y3 S+ C0 y- v
Google 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。
) j+ G+ l' P! \8 Z' V华为昇腾 910B:
* y9 z w% R# s6 n6 y1 xFP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。
+ [- t, o) |/ P单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。
9 f( G+ E/ `+ O阿里平头哥真武 810E(Zhenwu PPU):6 d* U7 J& S. O! H. c' e% C. w! ~
96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。) b+ I" C i! ~, v2 R N+ V5 C
结论:
9 T, D% w4 A v* ]能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。% z6 L' t7 \4 V E2 n* G
单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。
9 S+ l2 U0 x$ c. Q) J对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。
, T# K( C% }# R) e* f/ w# u自建 vs 云租的 TCO 与 token 成本8 w; m, O" l6 [, x1 G$ W. D
/ R4 m/ J# [4 S' _4 X* lLenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:# {8 Q4 l- v% M5 @
8×B300(Config D)自建 5 年 TCO ≈ $1.01M;* Q* I0 I: k) c- m5 w' S# x. `) A" y; a
等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。
S' V+ K5 \. ] K5 C x* O8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。! i) H4 ?% W4 j
Token 成本对比示例(LenovoPress 场景)[28]:8 V: `. m A3 E2 R7 o. ?; ?4 f. t
Llama‑70B 推理,8×H100 本地:约 $0.11/百万 token* L3 o0 {1 C" p' p, ]" ~
vs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。
2 T1 f( \: j3 q6 z同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。
7 ?, T6 n/ z8 F7 {+ `Llama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。
+ ^% G# Q9 T7 |# t$ L结论:7 m" E$ l2 u; c+ U. }$ i5 m
高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。7 q: Q5 t Q8 _! o$ S
Token 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。
. y1 G" Y5 Z: X1 q: e二、建设期成本分布:区域对比, m8 M" r' n& C: E
以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。
, u4 h% U0 y, K( F1 X5 t1 Z# @; ^1 R, I, t" u
2.1 全球/通用结构(以 1 MW 为单位)$ W0 A0 e$ C1 V* j. n
综合 JLL、ConstructElements 等[2][41][40]: J5 G; p7 i, _3 ?
9 V4 R ~) f2 {
壳体+机电(Shell & Core)
5 y( m& d# G& V; V, r M# J2 e" Y5 W) ]5 J) J0 M
全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]' ~+ q. C1 X; W# a
其中按成本构成[40]:
0 T8 n9 u- y+ b, u电力系统(变电、配电、UPS、母线等):40–50%
& d! y J8 Z& [5 B7 s机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%6 d9 [* Z) h- Y& h& ?7 T, R
建筑与土地、结构:约 15–20%; f4 D0 _2 b/ {. S
其他(消防、安防、楼宇管理等):约 10–15%) a$ x0 i+ B1 P3 ]* A; z4 L, j
IT 内装与 AI 基础设施(不含芯片)
# i) w9 k( f0 n6 _1 e1 Q6 X
2 l4 g0 F# l4 z) V4 J高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。
5 i: a: L2 k* c4 F9 {GPU/加速卡硬件 CAPEX) }- j* L, ]8 F/ ]' p! T8 B
8 S9 O" t. Q. P. a, c3 |5 M$ V0 f& e
多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。
/ F# m6 N3 A& C' ^$ c2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX& L+ M' g$ k0 V! O- H
结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):
$ j8 {6 \* \! i5 }: p
8 ^# a) L2 d- B区域 典型建设成本(壳体+机电,$M/MW) 备注% i, h8 |" o6 g$ z( p
中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13]
8 w( n: I' o/ ?* `# ~美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]
" f+ ~* }' b4 ]5 Y! S6 m欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41]
" ]* E, Q$ L; A+ e4 j/ A中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20] S i6 o. w( _9 E! M1 k
结论:
! f) Q. i9 `, o. v% X
3 H& m, J0 C, N; F# L' [单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。+ Y; z& H# b. j B
若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。/ p+ W7 y0 J! g2 {. i1 y/ n) j
2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例)
5 K, _4 d: p0 N2 D6 @6 z- m6 H以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:
: M9 a9 F* ~" G+ I; P& N" I$ Y' x
% y7 D4 H) u7 m% I假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;1 I! ]) s# X) j3 P: q
GPU 配置:
. o3 g9 i7 u6 o9 e有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);/ v; o2 V* f/ f; ?
每 rack 成本 ≈ $3.0–3.35M[34][69];1 D, ], t9 d3 S0 V& G# M
GPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。& r) J7 `3 c# C
与不同区域壳体+机电组合:5 l; \$ }( g- @: q; l
$ ^; q! e- b: H. R
以中值估算:
7 R* d# i2 ^4 m" D$ p5 S! Z) s+ A0 x) l) X# E
中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B
! V- `% a' l6 q+ D/ P# L美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B
) x1 s1 b3 T) U! m+ X欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B
; g, O( U! Q# a; ?中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B
* S% S" a8 l9 f3 q o可见:/ W+ v: j& S2 P+ a7 e
$ G4 B9 ]1 H+ a, \
GPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。
" u3 J4 s+ ~7 K, k! J+ X; _( M相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。' H: A) L/ q+ @, A
三、运营期成本结构与区域对比
% G* [ {4 P- A0 t9 b/ m7 ?7 o3.1 通用 OPEX 结构(高密 AI DC)
7 U3 O5 B% J4 X$ R4 \结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:
& g: s( R' k% z5 c4 q" i c# ]! t# D( T. M: T% I) J5 i, x
电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。, V5 \; k0 q- r1 ^- z2 `
冷却与水资源:
# c! `& D( M3 f2 k: n- A0 Z% F/ h能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。
; q8 V8 a3 Q* M水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。
. G2 Z9 F8 W" z; [人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。! O+ B; O# J {4 r/ @
托管/物业与维护:
+ ]; l2 Y; z3 o- c: i托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];$ S, ?1 b0 H4 h, E' v
硬件维护:LenovoPress 模型中按设备价 12%/年[28]。
- A' A( `8 }& i4 ^ g4 g. M3.2 区域差异(以 400MW / 3 年期为例)
* e/ B! \3 i$ W* C+ H" p9 H; [2 F使用 ChinaTalk 的电费与人工估算[1]:
/ ^9 v) F1 {+ {. R& w0 O; P7 e J* j, W& n$ }" ^" N7 `
电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:1 a' o* y: Z+ s5 k' B5 ^
中国:约 $0.06/kWh → 3 年电费 ≈ $350M5 u2 D1 E0 |3 k' i" F
美国:约 $0.09/kWh → 3 年电费 ≈ $600M
4 Q: n* j' f% J$ ^1 s中东:约 $0.07–0.10/kWh → $400–550M
; ]* ^' q# v9 j6 l# I欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势)
8 P, \5 b8 U, B7 j- ~$ _. X0 D0 q水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:
* S1 ~4 v& \0 u2 b* }美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]6 K# F* f. b' n# ]! h; Y
三年水费级别:2 o- V% [3 v! s0 r& O5 y# `! ~6 T1 v
美国:$40k+
! Y* W C2 @6 m1 {- L中国:$20k+* D8 f) k1 J3 m% T# `1 j/ q
结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。
) }. E. S, j3 Z+ j8 H0 p# g人员成本(3 年) – 假设 500 名全职运维:
, h& N, Z" H p' ]; r# k美国:500 × $120k × 3 = $180M+
2 N8 ?3 m; Z1 A* h3 `中国:500 × $22k × 3 = $33M+0 @% h# H, i; W/ f! K3 e* P3 w
差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。
) _$ E9 G+ W% `( _整体 OPEX 粗算(3 年) – 400MW 场景下:
8 i' y1 r6 I/ R( H* e% o" ]6 M8 z9 s$ J) K
项目 中国 美国. c6 K$ `8 ?3 T
电费 $350M $600M6 ^ m) M4 n' |8 ^
水费 <$0.05M <$0.05M
: `" I' o3 _- x+ c9 E! y人员 $33M $184M
% Z1 Z: r. @( L2 w: S: e其他维护/托管 同比例估算,地区差异主要体现在人工与地价
" F* M# M" O( u* |/ P3 r% i结论:! \' Z {, d% ^: B0 C
& D9 V$ G m; O" @就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。
9 f5 R; e, ~) {7 _) ?" s对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。
& {- C# e+ z% b) k6 I, J% s四、基于 token 的成本与利润推演
, n7 t* X# M! M! w4 c/ S2 s3 g4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元)
: y4 m& b* K$ E$ |4 \统一假设:1 o# c6 e* I, @, y$ k8 U* T" T1 X
3 C9 ^/ L! q2 a4 ^
典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])
! L5 z0 ~; ~9 I$ M/ l' t; G5 T1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh
# r# j/ I) a& |. I, b1 百万 token:278 Wh = 0.278 kWh
+ F4 w3 M- b/ P$ a+ Q. Q6 g) R场景 A:美国电价 $0.30/kWh. d( r. S, ^ E9 R
电费/百万 token = 0.278 kWh × $0.30/kWh
$ _& n; q& J* G) y8 O; f≈ $0.0834 / 百万 token1 F1 S" K U3 i8 D
场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh
: f8 d* ?; M. G" B! G7 {电费/百万 token = 0.278 kWh × $0.042+ e! i y m0 O
≈ $0.0117 / 百万 token- \) f- x# r0 M0 } z
对比当前 API 价格(OpenAI 2026Q1)[62]
" n/ {: ^& G6 U2 G% c3 s7 g以输出侧为主(成本最敏感):
% C$ L# @# [3 W6 P2 f# R: e9 K. Y: N0 q8 O% @! ]
模型 输出价 ($/百万 token)) I$ B$ S" W4 o! \7 Y/ H8 Q
GPT‑5.2 $14
' W5 B3 o5 G+ a$ l& A/ H$ @GPT‑5.2 Pro $168
9 ? t: f2 C0 s9 s8 f, I) ZGPT‑4.1 $8
' Y6 b6 x0 N6 ~' {( f D1 KGPT‑4o $10- g# l$ y* N$ F$ p: H
GPT‑4o mini $0.60
$ n7 X9 }; s5 H0 O8 ?" J则:( t/ a9 z' X+ x) D' m* s
, v Z! d, r+ ~2 p3 W+ Q( u2 F [
在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。, \" a: `% f8 B% [# u8 x
在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。
& I8 _; G0 b. g" i- F$ ?相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。
& V/ j0 T. s$ x! R) [结论:+ A6 O2 \/ f8 i0 q
即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。
, ]5 {% J7 @8 G2 Q- j. g: J
" P! V8 F4 {1 g% W4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO); @/ M1 w! C- x9 [2 t
以 LenovoPress 的 8×H100 Config A 为例[28]: c6 [) n- g) G
- B: V! `, g' ~/ T
5 年摊销下,8×H100 本地推理 70B 模型:- S( ^( E6 C% p) L) h' j3 T8 K* V
小时综合成本(CapEx摊销+Opex):$12.08/h7 _ e7 K- O1 }( @3 R
吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens
) T& I2 p3 s# v) m: L3 a% `成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token' q% `5 u- M$ A' n( Z. N1 l
电费在其中的占比:' h5 N: ~1 Z; D+ I2 i( |
Opex 6.37$/h 中电力+冷却约 $0.87/h[28]" h, w2 ` z: k a( H' r5 s# u/ Y2 M
电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token" x3 o: C2 p1 F; h9 h/ T+ b7 m
电费占 总 token 成本 ~7% 左右。! t/ j' W- S7 o( R" n: N
若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。
2 x) M. l z- |4 Q7 q- B% }" H若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。" ~" d( N3 x% Y: G: G! S. J; L: b
! v; E3 M% d* p3 [* N) F# w! @* j, f因此:5 U8 |: i8 I" W4 q& K$ ^
+ r9 |4 \8 V- r8 X
在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。/ S* v& [0 G2 k$ m/ R
在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。
! n8 X/ j: V9 i五、不同芯片方案的建设与运营成本对比% v& w: [& U) a3 t, l% m
5.1 NVIDIA 方案(H100/H200/B200/GB200)' j _9 q! H# m/ q# s3 } e
CAPEX:
9 L6 d% H) ^9 I9 C4 T6 D
* T) u: b. U" `H100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。0 V; u( L0 F* |. H: |
H200:显存提升,单卡价更高,8 卡节点约 $280k[28]。5 u9 n) }7 X, c" L
B200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。9 u% j2 G9 Y9 b9 e. k. l/ `. U
GB200 NVL72:/ q" s2 v; [, J" t
每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。7 m; M# {0 a& X6 y; X. `
冷却系统每 rack 额外 $50–56k[35]。$ e+ D$ ]4 h; E6 E' B# j# `- ?+ ^
在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。
9 t! M. a* x1 KOPEX & 能效:$ g0 |6 C4 W6 ]" G0 ?
, i5 V3 j/ Z0 L4 o" A, k+ f* U单 GPU 功耗:0 I/ ]) T5 j) q7 w( w! Y1 u9 [# K
H100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。. j9 M0 n* m9 L! {( I% ~% `
H200:功耗类似或稍高,但性能/W 提升[9][10]。0 X. [- M8 l; O( w8 H; R$ {6 ?
B200:标称 1,000W TDP,但实测约 600W 左右[68][69]。% B% m8 ~3 e# }; y9 C& @
Token 性能:7 f7 A2 k0 ` ~! J) h+ p
B200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。 L7 T4 J+ J& a3 D4 \- s% O
NVIDIA 的优势:
/ q0 N+ D) |6 g" B! N/ u8 u5 b" L0 H2 u- y* z& X2 l! {
软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。1 ^" w, f& r& h& c* e' H6 e$ p
但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。/ C' M6 |0 c5 G0 r* h" K5 W
5.2 Google TPU 方案
. a1 G3 E, O" P* pCAPEX:, l* v/ X0 y! ?0 s- Y; X6 c: z
6 L% }5 Y; r, L单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。+ T, k& s* E# Y8 x( [
GSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。+ A- o# Q" ?# [8 p- X! A% f
8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。
+ \6 T2 e A3 ^% q% k! }8 j& X6 J. ^能效:1 `: W# K+ Q: p
" e* }7 V8 G/ p( q0 |/ `
TPU v5e vs H100:3 y6 ?( ]1 i" \, C, b
同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。; Y, d3 z3 B- h( x$ B5 y& p
测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。
; K1 y4 n1 a! Z4 I, s( {新一代 Trillium/TPU v7:
, m+ U! `/ s, D( K% `能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。
* [6 g4 S, F4 z$ b' k8 C0 e" ]Google 方案的特点:, U1 o# i' V/ `/ m8 W
2 \; n, T( o b自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;
7 m% }, X% D: {' L& D( Y0 Q( y# S/ K3 ^对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。
% F1 C4 c8 b9 M5.3 华为昇腾 910B / 910C 方案4 L; L: U c' r, J: j
CAPEX:
6 k3 f4 ]- i2 y0 G @ b
! M4 o5 \! G$ _单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。7 k7 J/ W C j9 \4 O
与 A100 对比:* ?+ g( ]7 J1 p: S8 x
FP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。
- ^+ N( i! \( X9 Q' S: _8 c7 W市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。8 B# B) c& x% K0 M/ ^
使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。. Z0 v8 c" e; P# K
OPEX & 能效:
, A3 p* p$ t5 e, U: D" I, v( z; y% @; Y5 B# f
910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。
! L' [3 F; K* k0 H" ^0 d8 x部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。
# ~1 P) p* \+ O9 x( i在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。% i) ]; v3 C& @" \, _7 r
5.4 平头哥真武 810E(PPU)方案
, A& ^: H- w2 e2 GCAPEX:
6 r" q) ?7 @, _" ~1 R: w. W4 U/ z* H. P9 r9 l- F
技术参数:
: w* y; g9 x) C7 W6 S" @/ Z, r96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。 K- H2 P) q* Z2 q
性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。+ K" o0 a$ y' n9 V2 c; i, \
价格:& b4 Q! @" S1 T/ i, m0 I
未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。
* W9 M4 `! E) S& A6 @- v; b% e结合国内报道:
' E! O ]0 n& W. T( _* D2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。
% ?0 D" ?2 p: |1 [9 C数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。. M. X; O( k1 F8 A, j W: ?; c
OPEX & 能效:
' T& V; [) G/ A0 L( P! d# W
4 P! t9 p/ i2 V- }6 F400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;: B$ z$ G% Z# J* ^" W& @/ P7 Q
在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。
) [& z* D0 e" R$ h六、综合比较与策略建议
! U! D# a' `' I: m( C& @6.1 区域维度:在哪里建 AI 数据中心?9 G4 D5 E; X' C$ Y
纯经济性(TCO/tokens)排序(假设无政策/合规约束):
$ L7 [( ]9 A6 {7 Z3 l4 W/ [0 h: f
中国西部/北部(电价低、人力低、建设成本低): J2 `( f' M4 |# @" P2 J R8 b
中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)
" M0 I9 Y+ N8 Z: v美国电价低但人工高;东海岸/加州电价上涨压力大1 a: _. s1 f2 a$ o" N
欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求( t7 z. {- a- [) W7 O9 n6 @
若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:, E+ U W8 _5 R3 t6 @! x
1 Y( ]* I5 y: m& x1 l6 O
纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;( J; K: f& o$ l' P2 J w7 E; L
对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;7 {9 C# {/ `% i8 C, h0 i
但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。
1 q8 h0 G+ q( E6.2 技术栈维度:选哪家芯片/云栈?7 N V, y* y% V/ j% d8 T* ^* Z, w
若目标是全球最优 tokens/$ 且不受出口管制:3 p( V q0 k# P
8 D+ q5 I J, ~
Google TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。) k9 Y1 [8 m* N. H8 z; J
若在美国/欧洲,能自由采购 NVIDIA:3 @7 M2 A% f. I2 M) Z+ X
% f# f! q2 p! Y% ^, t. t% h5 ]9 Q
短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:4 d7 D- R# ]2 K, Q7 u8 C
成熟的软件栈与生态,极高的 tokens/s/GPU;. g, \% @& X3 _8 l) _) m/ P# a
在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本;: ?& Y+ n4 @& @( v0 ^/ d
但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。, `) \. n4 h" }2 y: s/ }- G% G ~0 V' k% ?
若在中国或存在出口管制约束:
+ o3 }6 j1 P1 O2 F( C/ s# |+ E' N
. n5 @( v% y* {: `昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:
, ?: }+ c# e* t8 X( M8 |4 _: q性能上已能覆盖大部分 GPT‑4 类推理需求;& t- E' ?" U! M3 N5 r9 T2 U* y
单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;% ~6 G3 d$ K( ?0 z
软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;. \5 F6 R8 Y: ?! [& k$ K4 b
建议配合:
+ k% ?& c$ N, g/ c f高效液冷(PUE~1.1)、
) l9 I" |/ B% [4 A' F5 G/ l大 batch、路由(浅层任务走小模型/低成本芯片)、
6 W5 O( n) t s3 X: p/ J强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。
' h. m$ H+ Q3 G5 m长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:
1 O4 T0 m3 p6 [( _5 M
% \/ I( p3 a, u% M d: \数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];
) h* e% B3 z, O! m1 y8 B8 n这意味着:& p: Q, h6 R7 D, {+ N5 y
优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);
% h- l! Z L( T, Y' E精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。
: Q1 S5 D" C! F3 g9 w6.3 针对你关心的具体问题的简要回答7 R! {$ q6 F; m0 J/ U
AI 数据中心建设 vs 运营成本的大体比例?
2 b8 c' m+ s4 K, O# U' o, M; ?8 i8 j1 e. F
在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。9 b! s3 l! o: O, ~7 }9 U5 q
其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。
* f1 S! H# O! A4 t7 x中国、美国、欧洲、中东的成本结构区别?0 S( r, Y" v! c, i, F$ e% ?( \
4 I% I; f" G5 S2 {% ^% c
建设期:
9 p3 c" t) J3 c中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。$ J/ d# U9 F! r) ?3 |2 b1 ]6 ~
运营期:
" S$ v {& b2 l# e电价:中东 ≈ 中国西部 < 美国平均 < 欧洲
; K9 x% Q+ h. r' H) u/ e* f人工:中 国 ≪ 美 欧,中东居中。! {2 A* O7 C9 d
在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?; [, n" e6 u e5 L4 \
0 ^; \- H, }5 q/ S1 F* ~
对于典型 1 J/token 推理负载:
& G, T# z! d) g& Y; {# S( o美国 $0.30/kWh:电费约 $0.083/M token! _( {) o5 w- E6 H( U
中国 0.3 元/kWh:电费约 $0.012/M token
# u$ P# z. Y2 f# z! ^8 C8 q对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。0 U: i8 v5 I. r, u
不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?
o+ F* N, g( M7 l0 n0 x4 C; O+ E2 {- e% G. w
在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;
0 t$ V+ a1 G6 z3 {6 P2 X4 K% i全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;
8 I0 U' r1 j, o, v7 U! O" W# g中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|