TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:3 @6 v" @" `% g) s+ K
2 B; H* I; z; T" ]一、总体分析框架与核心结论
7 B1 W, D. ^9 U1.1 分析框架概览
) k+ I, Z# }1 E# x( a2 f拆分维度, p1 `2 A) w! n
0 d2 R" D* b7 m" {7 o) f+ }阶段:
9 J) W% | y$ l9 ]9 w建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施# u9 g" B2 I7 }6 J; O! {# p1 `5 P5 ^
运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等
+ h0 Z, ]8 U$ g3 \2 U i8 d* j$ M区域:- F+ x- W' }) V( D% u3 @0 e
中国、美国、欧洲、中东(以海湾地区/UAE 为代表)1 j1 `" I: y; y
技术方案:3 s* m2 \; I f
NVIDIA(H100 / H200 / B200 / GB200 NVL72 等)( S' t' X: I2 w
Google TPU(v5e/v5p/Trillium 等)( x( \$ z5 o, w: R* Z
中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)% @9 k( R* v8 x; y B# L
算例基准
% [% w0 U& m0 f& u5 I; X
& U% B* A% A* H8 U" ^+ n; W以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:
% z1 q% |3 K8 s& p其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW) r; x- M4 A" P3 P" Q
PUE 假设约 1.11(高效液冷场景)[1][29]
. I2 ~2 ]6 M" g时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28] L2 ?* M8 }! U2 q/ h" y4 V! c" i
关键指标
4 O7 Q0 X/ U# E4 G3 E. _8 U- U& U! r9 P3 u
$/MW 建设成本(含/不含 IT 硬件)
% P( B# u2 j; i5 w+ N8 |$/kWh 电力成本、L/kWh 水耗
( H/ J) [; h1 j) }8 D9 V' |& M4 f$/token 或 $/百万 token 的综合成本
9 H# n: z* D+ f1 H9 ~9 \) M/ [Token-per-watt / Joule-per-token 作为能效基准[17][18][26]
) f! J7 }- B2 }0 \0 h项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租)
* W9 Z( S, l* O- {1.2 高层结论(供决策快速参考), K N* y) ^ e% _4 n
建设成本:AI 数据中心相对传统云数据中心成本翻倍. C" z' F; `, i* g
+ c* L+ F4 ]5 G( U0 j传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。& @$ W2 b! M3 J
AI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。
, | Q: i0 T2 v4 x按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。
: E; B% y/ g3 K区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区1 z# j" e, `2 h9 A
- t' G5 ^+ t: w中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13]
' ^* Q) U* F" ~5 P) A美国:$8–12M/MW,400 MW 约 $4.0B[1]; [. D. I) N6 h: ?/ V3 c: a t
欧洲:接近全球平均 $10.7–11.3M/MW[2][41]3 \/ ~6 t) r0 C: u' {
中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]# @% Y) a' q) \! ]6 I$ B2 X( S! E3 W
结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。
# [8 f. s' q: M7 sOPEX:电价与人工决定区域优势
4 m. f; K7 K& B0 h* f& ~" Y% d& _+ V; K0 f0 p0 r
电价(2025–2026 工商业大致区间):
: r! o' d4 J( U0 I) x6 X$ J中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]
) r8 u F7 ~+ h1 k' l) y- J美国:工业用电约 $0.085–0.09/kWh[44]
% x6 e! p+ c8 i! k# ^欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]4 H Q% a# b6 N0 U
中东/UAE:工业用户 $0.07–0.13/kWh[47]3 z" H6 W* L# q- c! ?" `: }: D
人工:* r1 V- z c# v7 T* F2 Y" w
中国数据中心运维:约 $22k/人/年8 J, M" V% T( E# a
美国数据中心运维:约 $120k/人/年[1]
* ~4 E+ W' @ c9 x1 P/ f结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。/ x# j0 X( Q/ t, q( t ]3 k* e( g0 \
能耗与每 token 能源成本:能效差异远大于电价差异
6 f: Y* e; H+ l# H; ]2 w% L5 W1 N
+ Y! n, L; T: U( T' tIEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。3 v+ g. l. ~! P& D
大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。
) i1 ?$ |+ U5 `5 Z5 o `将 token 能耗约化为统一口径:
) F1 k: z0 f4 j. ]: N2 d粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:( u% G6 m# i3 a v2 e4 z7 M
中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token
- y! P- C1 w! K0 w0 d) X# i; u美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token
& x" N W5 q" L7 O对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。% r* F- r; l" j) e
不同芯片方案的核心差异
, _3 z# e i8 ?9 H$ |7 W- L- a$ ?+ B9 ]/ ]% z( y
NVIDIA Blackwell/B200 & GB200 NVL72:
- i4 s5 d8 @% f: V A: q0 l单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。
0 ^9 h- w M7 ?0 M) u( p) E. uGB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。
: V! ]/ `, A" e1 e( \( rGoogle TPU v5e/v5p/Trillium:
+ p, h. y2 J( O, Y) }: `TPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。
/ o9 P% X5 b6 WGoogle 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。
, o6 ]/ p& E' h" p8 C* J+ ?) W9 Y7 M华为昇腾 910B:
/ [7 v' |3 u. [7 \0 m7 w; rFP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。
* N$ L% n$ Z, d4 J8 ?1 A1 u+ T% f单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。9 H1 Z) h* ~# ?- Y
阿里平头哥真武 810E(Zhenwu PPU):& [7 J5 ~' n5 C& V
96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。
; U4 n2 u' V0 Q/ @" R- u结论:/ N2 g& E$ h' {/ |; q/ v9 H7 ^* b* o
能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。' R; F% N/ J. a. V* W3 m
单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。) w3 p# t9 P# e: g1 i$ a
对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。+ L C$ W5 E% _3 ]! Z( V
自建 vs 云租的 TCO 与 token 成本
! {9 P1 l5 _$ r! F
; s6 B* g1 k4 q6 d3 c* W$ d2 qLenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:
P+ z5 m" F. ~* _$ N% `' q. n8×B300(Config D)自建 5 年 TCO ≈ $1.01M;0 l1 o0 `9 Y' v' P; O
等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。
/ q1 D L3 o9 v( m8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。9 O$ m' t( G) A! f W( m
Token 成本对比示例(LenovoPress 场景)[28]:3 Y' i; L& Y+ Q0 j+ u
Llama‑70B 推理,8×H100 本地:约 $0.11/百万 token8 {" V* U# a8 c: | p8 u
vs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。1 T+ A# r! C6 \
同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。" [1 j' ?2 e1 l" T( e, c& p
Llama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。
0 o; U. P, d, l; T1 L$ h结论:
- T1 p, n2 r# V: i9 j) a) r高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。5 [% n3 }4 a6 m% @0 `: r, t
Token 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。
1 S+ c j9 N! R9 i二、建设期成本分布:区域对比
+ U) `8 T+ ^2 D( X( h以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。2 G) j5 w0 n3 n3 u4 E; m( J
s: q3 x8 q& m: H8 e2.1 全球/通用结构(以 1 MW 为单位) p. i2 ^8 D0 z6 D* r
综合 JLL、ConstructElements 等[2][41][40]: D) n* Z& k i( y& i
/ l- `8 ~; w5 o/ C4 ~! D. i& T, T壳体+机电(Shell & Core)
- Y9 P. Z9 _6 i: r! {% T- ]$ k, a2 j' @$ v
全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]
1 E. Q! W Y( y* y% v' U- a6 ` H其中按成本构成[40]:
6 |2 m. M" B" I8 ?电力系统(变电、配电、UPS、母线等):40–50%+ I% [ {% j5 O' U; H7 c U
机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%
3 d) l) a; W1 {2 H" S) S7 |. w建筑与土地、结构:约 15–20%- _2 {/ k: r+ J& E! d" X0 ^
其他(消防、安防、楼宇管理等):约 10–15%
- N r1 U& q; W6 Z8 k3 cIT 内装与 AI 基础设施(不含芯片)
7 L3 h o& g5 \1 v0 E) [6 s. d3 V' O4 x
高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。. U2 U8 X* z" s, N' p0 N1 m& S8 f3 d( V
GPU/加速卡硬件 CAPEX
- h/ `! R9 V4 Z' U- f# f: I/ Q) V) A4 t6 m% \/ P0 P' ^4 [1 q
多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。
8 L( E/ Y! j/ Z3 p: s2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX1 Z8 N* J0 {8 b; N' D& R
结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):
& c5 Y& [5 e! a. F) ~
' a3 ~0 X7 W6 K1 s区域 典型建设成本(壳体+机电,$M/MW) 备注
; r: t! u' Q g) J: C- g' [中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13]+ n6 B- z6 P& Y; O. p; D! V
美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]
; p# H2 c/ D0 _! ~7 |1 I' h欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41]. J1 O5 K6 d2 Z0 N) b! f
中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20]
; S* ?7 F; J, `0 m( w4 j* ^结论:1 S9 {3 p( i, i$ M9 y
7 I' t; g- E4 t# ~$ Z5 f
单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。
% o @/ `$ _& }# |% B* E) i若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。% k, P6 k# h) W7 ]# }, `
2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例)! w& S5 ]3 H% }
以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:
( I9 ~% _; R( l) M8 `
N9 Q; z7 D& z, O9 X* j- D3 t: }假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;
0 P. t9 ]: {" t! G( \' L0 NGPU 配置:
4 B. L+ A6 I& [3 S2 z4 V2 }3 b0 ?有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);2 a9 a0 k' k( x) @% ^8 |! Q' `
每 rack 成本 ≈ $3.0–3.35M[34][69];5 l2 h9 c* w" G- q! ?8 n7 j7 q1 G. b
GPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。
0 w* g( D. r1 X+ Q与不同区域壳体+机电组合:
4 Q* f) W0 s" q- Z4 ]: I9 X k
& a% q- N, F* t# x以中值估算:
# O& f' U0 A+ p* B3 m0 N1 f* F+ ~
0 k! F: D8 u. ]中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B
+ V8 K$ f. D) P. N/ o" L美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B
3 D# Y/ d! Q: U欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B/ M8 S* y3 i" y& V& |4 O; A: V
中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B
6 l. n- X% M! B* I' w# s Q可见:
1 ~: e2 W3 Q T1 Z
2 [: A: |4 `. ], U5 LGPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。5 v' c; K7 v) B2 h( p& M
相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。 x9 Y% S: X7 ]
三、运营期成本结构与区域对比, M+ w$ L! `/ x, z j3 F
3.1 通用 OPEX 结构(高密 AI DC)
; O) S e3 U1 [5 m% Z! _2 f, \2 C/ t5 ]结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:
* R0 O+ {* b o# {+ x9 ?9 g7 \0 D4 R/ T# s, f* t: |) ^- b# j
电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。5 \, y6 N/ [; Q6 j
冷却与水资源:
( B$ S$ \$ o1 U2 S能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。: F/ u7 L* ?$ F: R3 @2 B; u9 P& a {
水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。
; b1 W; [+ O8 ~ F; h人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。. I8 u( U5 B; A* u. l4 E* T
托管/物业与维护:
+ C# [( d$ Z; ]* v托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];
% T4 a" N$ O; f) J+ ^硬件维护:LenovoPress 模型中按设备价 12%/年[28]。
) L: i; l0 c, x8 `* `. {, h3.2 区域差异(以 400MW / 3 年期为例)
/ z, z6 E; z) I使用 ChinaTalk 的电费与人工估算[1]:
5 ~5 H5 F6 S: n# Y W% V5 Y @0 R5 V, r6 b4 A" X0 k- G
电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:8 m4 b, ^8 s0 t) U" x( W7 O
中国:约 $0.06/kWh → 3 年电费 ≈ $350M
, P& w: I& W0 l. y/ N- B `3 a美国:约 $0.09/kWh → 3 年电费 ≈ $600M
! n8 f4 J; E; }8 u中东:约 $0.07–0.10/kWh → $400–550M# q- B% I: E, E" Y3 b9 Y8 P
欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势): A; M& D5 c+ p0 R
水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:1 A r* [9 F; ?, G: w
美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]5 w+ n+ c0 t( E
三年水费级别:: R0 x7 z* m" [7 L& W$ m! K3 @
美国:$40k+, l* @- m* C# U! G9 `5 @
中国:$20k+/ U6 V( q6 G) O% Z
结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。; J' w& k6 W6 K, P/ j
人员成本(3 年) – 假设 500 名全职运维:
! B; n+ j: u9 c4 Y; N( l美国:500 × $120k × 3 = $180M+; A7 s- E7 {: d) I( Q/ b
中国:500 × $22k × 3 = $33M+
4 O) n6 O. u& ]. k差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。
' b9 Z A7 R7 p* {) U$ {整体 OPEX 粗算(3 年) – 400MW 场景下:
5 d$ f$ q% r% B6 Q. U/ h
& t" o6 b" j: a" f5 v8 }项目 中国 美国+ \# L) h# `1 r, n9 C8 s
电费 $350M $600M; ?% g4 p6 z' u% B3 r) b# I
水费 <$0.05M <$0.05M ?" z8 I, s8 {: r
人员 $33M $184M
* P( p: r/ |; [, `! X其他维护/托管 同比例估算,地区差异主要体现在人工与地价
# V5 x8 Z3 ?3 h结论:
/ M6 ?: Y7 p8 z6 M5 u R% p% _5 Y3 \' |3 D) i( u2 U
就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。
9 a& v; ~' \# g1 Y) G1 i对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。
D3 G( `" J3 ~# D! B; h! }7 J四、基于 token 的成本与利润推演5 e2 x9 X& i' a0 C5 M6 n! q
4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元)" C: p8 v( x% u- I6 I
统一假设:
]! }0 r+ H( \" @7 P( ?0 x3 D' w9 i& y! I) J$ P
典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])% w0 |4 z8 v& e0 T: }. D9 L$ s6 X& r, a! U2 i
1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh' N3 D5 g' v8 G! t7 k
1 百万 token:278 Wh = 0.278 kWh/ H* }- C6 [2 {
场景 A:美国电价 $0.30/kWh7 _" W- y1 J) u; p% ^* r3 N
电费/百万 token = 0.278 kWh × $0.30/kWh
5 U4 M9 n! w5 p5 g& U# D≈ $0.0834 / 百万 token/ y# U/ y& `/ V8 h& I
场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh$ K# S9 x J S
电费/百万 token = 0.278 kWh × $0.042
. K9 L# z- ?& N4 x' Y$ G3 c9 V≈ $0.0117 / 百万 token
0 y$ z) |" J& C对比当前 API 价格(OpenAI 2026Q1)[62]/ v+ N) [: k+ w# o* I( v+ o
以输出侧为主(成本最敏感):% Y$ U/ }/ y6 U( E3 ]6 V
+ N, h# s& X: P
模型 输出价 ($/百万 token)
2 r) H" W' c- P4 R) j) ]GPT‑5.2 $14# |$ X3 N) ~* v$ F+ Q
GPT‑5.2 Pro $168
" C9 C2 Q; h( s7 k# D! k0 KGPT‑4.1 $8 X. J# p. d8 y+ t1 x3 ?( H
GPT‑4o $10
. K8 M% M! r" }1 W8 p$ V4 X( qGPT‑4o mini $0.607 @& |! g9 P4 w( H
则:
4 Y5 |8 l% n" P8 j( I7 ?2 [8 U2 C( Q' G
在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。
+ F' S2 v5 ^$ a8 E在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。4 B2 h8 q* c! z; D' @/ ]! ]
相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。0 H+ E! U' d8 P7 G8 P' y( J
结论:& m5 \2 m ~/ q, Q, k r+ k4 D
即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。1 x) t& x8 k- F2 n( e1 R n
% V0 }: |& h/ d: `4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO)6 V( g+ }# e3 n. m* p& X
以 LenovoPress 的 8×H100 Config A 为例[28]:
4 P% W$ p# ]3 S1 J; l( f2 r ~5 T( }5 K" {1 Z
5 年摊销下,8×H100 本地推理 70B 模型:0 ~9 Y( \. q6 K4 X y; C+ ]
小时综合成本(CapEx摊销+Opex):$12.08/h9 E. T' g6 p6 b" V7 J. y( E
吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens3 p+ c& E2 I' P3 b7 h% T
成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token' O) J. a0 n4 v6 r- O
电费在其中的占比:7 _& k, {8 r) p" Q/ W
Opex 6.37$/h 中电力+冷却约 $0.87/h[28]
% }6 e9 e0 P% G3 d6 v! X( a- G# l( F电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token
7 q" j. p: U K电费占 总 token 成本 ~7% 左右。9 d) G: Z! N0 t3 w: T I1 C9 M
若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。
! K( }# d! e I( K9 x, } F若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。
) G6 L+ e/ Y* O9 P
& A* d8 R% J" r9 a因此:
' o% C w. W0 Q& M* K9 U' c- z2 P: S
在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。
/ P* ]' \! `4 y' E! m在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。
7 e1 P8 z7 h D5 I9 V2 J五、不同芯片方案的建设与运营成本对比1 g G) Z' @; G1 g; g7 L- {
5.1 NVIDIA 方案(H100/H200/B200/GB200)
3 }6 @* y ^8 T' D$ v4 QCAPEX:
8 v: @, n+ J6 H- _7 o$ h* n i; e9 d, |7 Y6 v0 J
H100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。6 F: f/ X, i1 v2 |/ O
H200:显存提升,单卡价更高,8 卡节点约 $280k[28]。
* ?7 d8 f, h6 w1 dB200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。) e- p/ p; D& g& G/ G( s$ E
GB200 NVL72:* Z" @* w, k% t4 _! J
每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。
, C& _% y7 J" Q2 n! P冷却系统每 rack 额外 $50–56k[35]。
V+ C* p1 N0 ]" n' i1 Q. h在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。
5 C6 V* M, t% v4 dOPEX & 能效:
7 w( ^# W& b7 O; r% W4 g' h) _, a s+ n2 P& l& n8 p, |
单 GPU 功耗:
* `0 q# v& U% j4 f0 m' eH100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。
. I/ S( ^7 ^$ Q' [H200:功耗类似或稍高,但性能/W 提升[9][10]。1 L5 Z+ \! P. Y1 R2 z
B200:标称 1,000W TDP,但实测约 600W 左右[68][69]。
: g2 Y- ?( T. l; l+ dToken 性能:8 V: D. l* n& V! A
B200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。
% h' A0 A; w+ J+ t+ JNVIDIA 的优势:; d/ o7 z$ U4 l% G8 _
$ v2 q v' n: i' m7 ~" R8 E软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。
; m/ U9 E* f% @" K3 a- v但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。
" k# }6 f! P* s3 C- _5.2 Google TPU 方案& r* t5 C3 [6 f+ F
CAPEX:2 K# f9 w+ F* G7 A4 |
# o! u) S1 {$ N! e% N! m
单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。
+ y2 \! l' q, w9 EGSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。2 f8 x& d- X8 ^5 o* v0 j7 B
8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。& N( @8 [7 v3 t. J& G' }9 T
能效:
$ P" \! t- p1 H% {! {: [: n7 N: Z% m' d6 F/ T5 r0 u$ b6 J7 ]
TPU v5e vs H100:
7 {6 h [ J* ?同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。
+ t) z! M. S' l9 d/ w! E- p) Q测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。
0 a: R' a+ n$ \新一代 Trillium/TPU v7:2 H5 `# y" w% d, Y' e% K+ ?
能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。
3 N8 ?5 |& ~. F* ~5 VGoogle 方案的特点:. V% M- z5 C6 J. f+ V$ {
+ b/ }7 T/ P7 ]0 C, }自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;" }' N4 o! S! x, n- z5 m% \
对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。
' b. {3 ? P3 H* s5.3 华为昇腾 910B / 910C 方案6 ?# u: t4 \. `# j6 c( t/ B
CAPEX:0 Q/ Z+ n# [% @. v) W
4 G" f. E, f4 {" W- ?+ }# {' i5 U单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。
6 J7 o, N+ z6 ]( c/ X与 A100 对比:$ C5 X. S" V( m9 d) z" M3 {1 b" i
FP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。
3 a. Q8 m2 n4 s8 Y/ C' M* ~% q市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。- n7 p j0 ?7 b$ B5 O
使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。2 f" Z3 B i/ | \- a: R9 Z6 R8 ~2 o
OPEX & 能效:: V' E# s- M$ U) o& f2 g! N
% x4 ?% K# Y/ k9 \. P$ e" O' [/ A910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。
4 A7 u: \6 K3 R( s5 X- }部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。! S' V% a" \2 i$ ]) i$ N- b
在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。1 T' S% d% O4 a
5.4 平头哥真武 810E(PPU)方案1 r) x- u0 v7 O2 `- m' h
CAPEX:! }- h) c+ z8 k {$ x
+ U1 a1 J$ c% F2 ?9 H1 p技术参数:; y3 F" I% h! v6 i5 s& r0 x4 e# G
96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。
1 V9 D, R9 K/ [9 }9 J1 F! [- u2 H- I2 a性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。8 E9 ?! h1 z+ P% U
价格:( Z' `* D, K: d. `8 v' [+ U# O4 Q9 N
未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。
7 K C: ^4 s. X# m结合国内报道:
7 h9 @+ a$ ]! {# S6 }( w2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。
1 c8 r; l& H F c6 e数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。
% a: J+ J+ M" K( @3 Q+ C- n0 ?OPEX & 能效:- v) S& H5 }% ~8 C8 }5 C- d1 a
' }7 F1 m; w2 F* r$ m400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;
i3 H8 s/ a6 u在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。
1 w W2 D& h7 I) P六、综合比较与策略建议
# Z7 S# H5 D$ H: p) [6 h/ d/ e6.1 区域维度:在哪里建 AI 数据中心?4 g- k7 X7 l) d; V6 d
纯经济性(TCO/tokens)排序(假设无政策/合规约束):0 C: w* O( g# Q" `9 h9 z( E: |
: d' g+ ]* r) e; U中国西部/北部(电价低、人力低、建设成本低); x9 F8 |% x0 ]: n
中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)
9 [ ]" ?( }4 r5 v- X8 Z5 n5 h美国电价低但人工高;东海岸/加州电价上涨压力大
5 I9 p: K8 w% e' m+ [9 p6 D欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求
0 J) ]4 W" }* ~若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:0 I: X" e4 T/ ~ Y( P5 }
5 h2 y7 y1 L3 B/ E& V$ ?
纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;
: m2 @5 o; J+ \, e对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;
2 R& N+ M" s% Z' u& o7 n9 @7 e/ P但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。+ D2 K |5 I( C* o
6.2 技术栈维度:选哪家芯片/云栈?
# e4 B( N0 U, _若目标是全球最优 tokens/$ 且不受出口管制:6 {1 O* V, t* p+ y
: @2 L- q) r" X& p' k1 K/ q
Google TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。' ^- a0 V, P0 ?, Q
若在美国/欧洲,能自由采购 NVIDIA:; h j% y- m# x* p
7 d D$ s' f5 q; v/ P1 p短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:: D- Y' w! k& Z: E9 U
成熟的软件栈与生态,极高的 tokens/s/GPU;+ D6 v+ {' O/ `. n/ Q E6 R F: H
在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本;4 s2 G" G+ J g5 X- R7 f+ c
但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。4 Z; l4 r$ r$ ]5 {1 D" x4 I8 I
若在中国或存在出口管制约束:
/ m$ i7 I7 \) V) ]0 r6 R$ H. g
/ n$ v1 S7 L% Q8 c) z. f E q. T' i昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:+ B. g( S/ O% S' I }; L7 ]! w
性能上已能覆盖大部分 GPT‑4 类推理需求;* c/ ~1 a6 G8 ?1 B4 n! e1 f
单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;
$ b: | g, }# R. p2 d, R t& t软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;
3 w3 S7 K) p7 d) J建议配合:
: w6 s b) E) D" m4 Y9 _5 y* Z高效液冷(PUE~1.1)、9 t5 Z5 f# Z- H" P
大 batch、路由(浅层任务走小模型/低成本芯片)、
: S3 X- o- M( K, I* n9 a强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。
! R7 B3 r6 d. j长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:
( G& j7 ]3 c, w# {1 t3 c: {9 v" X; v* f
数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];
1 a0 f& K+ d5 Y8 I" ^0 W这意味着:
( `, }: r) D0 Q5 f7 Y% I, t2 o优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);) V, p8 r5 }! G. \7 ]. J4 N- O9 f% F
精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。
% G5 U! y% L% ]! S6.3 针对你关心的具体问题的简要回答" |% s }7 {: h8 K
AI 数据中心建设 vs 运营成本的大体比例?0 W0 X& x: k% a$ w
, N# O2 G9 l& t1 E+ O/ ]2 g6 B在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。5 Y. `' e# X. x
其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。
$ g" _8 ^; G" c" h+ \5 I中国、美国、欧洲、中东的成本结构区别?
$ a0 \: A5 o! t) O3 K& }6 Q' a$ |9 m* e3 {' A; T
建设期:
/ M) S$ m5 c) p6 F中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。
1 u5 m! m, C: f. e* ~# H) d/ k运营期:, k! N0 m% B/ u* b# E' t
电价:中东 ≈ 中国西部 < 美国平均 < 欧洲) N d5 u4 F- L# Q1 q
人工:中 国 ≪ 美 欧,中东居中。3 w9 i1 ^9 l. O5 u
在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?
+ k+ E* }; e1 }1 K
% S# g0 J5 L, R; q对于典型 1 J/token 推理负载:6 \' k2 B' U& G
美国 $0.30/kWh:电费约 $0.083/M token
7 b: [* p0 ]- z: I' i7 N; Z中国 0.3 元/kWh:电费约 $0.012/M token7 s2 _0 N8 l0 ], V( z8 |" `5 F
对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。) e/ H: c9 q+ b5 e
不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?
$ g6 V5 ~; u) R( o L/ e- B
; U% I: s0 t: H) ?7 g在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;
% T1 O n6 x! v2 N0 F }全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;" m( h8 Q! O9 g
中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|