TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:
6 l" Y3 n) Y+ c8 }# I7 G
2 Q& J( {5 Y' u: d! ]2 o+ V% d: |' i一、总体分析框架与核心结论
* H: ^. o7 b, c% y5 a/ i1.1 分析框架概览
* e K7 u& f2 x拆分维度7 F3 W' s) m/ O+ W/ L
' M: t @5 b0 z' v3 G, ~
阶段:8 Z ~" k$ O5 L+ v `
建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施
; r/ Q/ `9 ^: z4 P3 c, k运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等" p) f; v; `1 `( y; A+ X
区域:
1 E: X5 m* _( B/ p1 ]中国、美国、欧洲、中东(以海湾地区/UAE 为代表); S2 m7 F$ u, S
技术方案:, W: G$ g2 S5 }( w3 H. Q5 l* B
NVIDIA(H100 / H200 / B200 / GB200 NVL72 等): z# ~- f2 P% K s
Google TPU(v5e/v5p/Trillium 等)1 _ n$ i+ v7 L3 @
中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)5 V, t" }& C& e# F% j4 b" b* l) j
算例基准
! s- G5 i! f0 e' u6 o! [
' ~; X9 r+ M8 F! t4 C' G9 ^以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:. }/ `& D) K- h1 U* {) \
其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW
1 X6 {: k9 B( O% _PUE 假设约 1.11(高效液冷场景)[1][29]
4 U9 h6 }7 ]) j时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28]
6 r) L0 W6 e+ k关键指标
3 J: v9 P b: Z( q- E4 z1 T2 U7 o- m; C' Y! L
$/MW 建设成本(含/不含 IT 硬件)
# k0 j0 {& }% [* G1 x9 W. Z1 C2 B$/kWh 电力成本、L/kWh 水耗1 i+ d6 F5 ~1 L0 C) s6 B* `% u; G. }0 r
$/token 或 $/百万 token 的综合成本
6 N1 X P) |& f ?- f! @5 b1 eToken-per-watt / Joule-per-token 作为能效基准[17][18][26]
" f- Y, C& h7 i! |, B! v$ V项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租): f. s3 s" z3 C X" q- I" n4 D
1.2 高层结论(供决策快速参考)
$ ]2 X$ {% K* `/ ?7 A2 }7 |建设成本:AI 数据中心相对传统云数据中心成本翻倍
* Z6 p- Y, W) E) G% c, G3 V1 }9 e$ E" p- h- F
传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。3 F( `- q0 s- q" O) M I
AI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。
; |# ?) Q* o9 }3 y1 a/ g' a' j& h按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。
7 @5 Y/ r4 F8 z区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区
F: P5 F8 e h2 D- {. o4 }6 E. n; W4 N8 l+ s
中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13]9 {, u8 x+ {3 U" J0 ]
美国:$8–12M/MW,400 MW 约 $4.0B[1]. P2 W( ]' P, A3 e7 c) W% I
欧洲:接近全球平均 $10.7–11.3M/MW[2][41]" @' M2 U6 g; b
中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]8 A9 z+ p# C$ l
结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。
0 z+ H+ l; [3 Y Q! X0 u* G3 w! {0 DOPEX:电价与人工决定区域优势5 B8 m& R4 Y/ A( l' U3 g
/ f8 `" \2 @) q( ~电价(2025–2026 工商业大致区间):
( g& e* r; f [中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]+ v4 x- B; Z7 `5 M
美国:工业用电约 $0.085–0.09/kWh[44]
& S+ w; E7 y2 k$ ?3 ~2 l欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]6 p/ }, ~- O" h3 n9 m, f. o
中东/UAE:工业用户 $0.07–0.13/kWh[47]
* C3 |5 t, p% b( g人工:2 C3 X: U1 p8 @
中国数据中心运维:约 $22k/人/年! C4 a- g( q" I$ h
美国数据中心运维:约 $120k/人/年[1]
X4 b' Z1 o/ H& x# V" o结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。 A i8 X% [, _* i8 j% x
能耗与每 token 能源成本:能效差异远大于电价差异
% O/ y: K4 Z" l+ J
/ ]6 r2 Z# ]' O& IIEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。; b9 `) G* r0 E+ l2 X$ n
大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。
% @! v- t$ S0 \$ R7 g' E将 token 能耗约化为统一口径:
, b2 W; @& [2 p% X: Q粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:; J+ I ?" S. O& t7 B' n4 v$ F
中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token
* Y9 [: n4 A! b, x# k美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token" l( j% C5 }7 J* L( z; @- R; l
对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。
+ j" @0 {' \, f6 r, e不同芯片方案的核心差异
9 i7 G: {" h! h! J9 t& i& i$ q+ y7 b% r7 E0 s
NVIDIA Blackwell/B200 & GB200 NVL72:
# `, t9 N2 I4 i' U; H3 w单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。2 M/ Z, C' d9 Y8 k; m+ q
GB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。4 P$ S2 q7 b' h( N$ T
Google TPU v5e/v5p/Trillium:& Z0 E" b: t8 b2 u9 {% G! n
TPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。
1 _' k7 F, E9 M, {+ b; K# KGoogle 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。1 P( c2 d+ m! g1 A( l- d
华为昇腾 910B:
8 p- E, k5 m1 n; H1 ZFP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。7 d: u2 G0 ^. P0 N( Y
单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。
! O+ h$ K: I) ^' X0 a( b阿里平头哥真武 810E(Zhenwu PPU):7 S: I7 I+ o! {
96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。
* U0 c. T0 a$ [0 B3 d6 M0 ?; M结论:
, c5 S ]6 W; [能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。- O0 a$ O4 ]# N6 n. o2 u* e& E" d; }
单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。
4 k4 ]. h. X1 m) p6 {6 J对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。
t9 n2 L- Y* o自建 vs 云租的 TCO 与 token 成本
6 [) q ^0 N [; k) F! a
: l2 ?% y; x+ L) g- x6 X$ r% f; W: uLenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:
0 c9 X0 d" i( q) a) e$ u8×B300(Config D)自建 5 年 TCO ≈ $1.01M;
; K ~; f) a7 n" P O等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。
5 j( i. ~* b8 s3 K8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。
, {0 R/ Y: f8 dToken 成本对比示例(LenovoPress 场景)[28]:
7 q3 C1 O8 X' H! j' g' ?/ P8 CLlama‑70B 推理,8×H100 本地:约 $0.11/百万 token& W3 G& _ x8 }- I. d
vs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。
0 s% d9 |) _* ~+ A同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。
# B8 e6 l( I x9 }; T7 kLlama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。
7 ?; B6 }$ _: e: F# s1 H0 M结论:
" F/ c. A9 U: N/ k Z高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。3 g2 P$ X+ H3 i" b2 C, Y
Token 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。
) ~/ J5 |# N- G* B K$ }0 b二、建设期成本分布:区域对比
2 }0 _5 w f. o3 D" z" n& n以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。
& g+ ~/ d" y2 c% _& o, v& Q0 D5 k+ B6 ~7 \5 _$ R3 \
2.1 全球/通用结构(以 1 MW 为单位)1 t2 X2 N9 q$ @& s; r2 W
综合 JLL、ConstructElements 等[2][41][40]:
5 x2 y/ I3 F: x1 \: _3 h( f- j# X2 N* y! i3 d
壳体+机电(Shell & Core)
! i* G" Y3 v7 S" d+ U9 I$ u- F: j4 W! C0 ~5 I. c, L0 w+ r9 S
全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]5 o3 o5 L4 u, Y8 @: T& \, v% [6 B
其中按成本构成[40]:
5 R& O& v* o1 [3 f" b" _电力系统(变电、配电、UPS、母线等):40–50%) s5 I$ ^% S. e6 Q1 e* v. g* i
机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%
$ J9 d- v' W& g) x( t建筑与土地、结构:约 15–20%/ U' { k: E8 F9 i: ^+ c7 u
其他(消防、安防、楼宇管理等):约 10–15%& O, `3 E/ ~/ D$ h& T4 h
IT 内装与 AI 基础设施(不含芯片)
% \7 G; U% L; u' p" _& ?9 |2 B0 X+ C5 I
高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。
x% {5 H6 w) m U* ?1 d+ T$ a1 AGPU/加速卡硬件 CAPEX) A: r4 e0 `4 c( V6 Z2 b/ P- p+ \
" {! o# j: J& {多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。! H2 W. P) T4 c* v
2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX9 S! ~: v3 d7 N
结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):- A( [# _4 l1 P$ h3 E0 K# D1 z
# I6 y/ b1 t% `6 O' ?# x
区域 典型建设成本(壳体+机电,$M/MW) 备注6 H0 o3 r% ^% `
中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13]
7 b1 c2 X# t, E' {5 l" O6 O美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]
9 P1 ?" K& y* E& s欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41]6 z0 W2 \, }7 g5 @6 h
中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20]6 C' C( E* z# }( O* E# F
结论:& x) X0 _' Q; R, v6 {! n S
. {( h$ _+ m# T# d4 f) @1 C7 M单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。
7 I: U$ V, p& A* {; S7 _若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。+ x( |* N! U6 @, _7 l+ o# M
2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例)9 c, A& c# w1 m; w6 z+ I4 ]
以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:: i, }7 u" C' V/ O
6 _( _$ K0 j7 C# G t9 W
假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;
. M/ X8 d9 k* T* h+ c2 X' C: g2 SGPU 配置:
0 B1 k. {% ]9 V* j/ G" P: N有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);
6 ~- h/ l8 H) y* n. a! f3 _- U每 rack 成本 ≈ $3.0–3.35M[34][69];
5 ]# i# K# M* y; U& w) X+ IGPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。0 n. g) B1 ]. S- h, F
与不同区域壳体+机电组合:% C0 d5 a3 R$ W J& f& [
6 M2 W" G# w1 P
以中值估算:! a0 I2 A8 b7 L% v$ M
2 d+ a) W% m' F8 S! b/ |中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B* G& z1 z7 C' J8 o
美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B
# d0 R9 A# W: W3 _1 V% Y2 T欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B9 d8 k& o* d, B, a
中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B; E4 v) l+ o/ f: B; T# o
可见:6 D) ^. I! z. P- s: `
* u, S7 r" S& B6 [8 f. Y0 Q* i
GPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。
2 X- V3 r# O, ?; D* S3 y( t- [相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。
3 @$ k7 I: S4 m& \. E9 s2 _三、运营期成本结构与区域对比0 ^5 G& D6 a; f3 B( t* o
3.1 通用 OPEX 结构(高密 AI DC)0 h. M$ J& a8 V T
结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:
' i' C! P6 P8 X, \# \
1 [( G! g/ ?- a0 i- G电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。) h) h9 B! w: `. C& w+ u/ d
冷却与水资源:
7 l9 k) {; B3 O: T" B$ n能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。
8 Z4 L' C. W4 s水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。/ }+ h5 ~( ?- j2 z% ?! F( \
人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。* D0 {3 v+ w7 G, {. b" n0 Z
托管/物业与维护:3 H& E- H9 q b4 O. B) h. A
托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];
. E4 `: I: M; W$ v% k7 [. ]* S硬件维护:LenovoPress 模型中按设备价 12%/年[28]。
* J$ Q( G, P( u- z' c$ s. Z3.2 区域差异(以 400MW / 3 年期为例)
: s7 U3 N1 w; e使用 ChinaTalk 的电费与人工估算[1]:
: l4 ^2 Q; H# [
4 g5 U/ N. x7 A* s2 ?7 n+ p电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:. R' ~( p) O' b
中国:约 $0.06/kWh → 3 年电费 ≈ $350M D U. _6 c/ q2 A
美国:约 $0.09/kWh → 3 年电费 ≈ $600M
1 r/ J3 L8 ]- F+ ?中东:约 $0.07–0.10/kWh → $400–550M( v, w. ]8 O- w- W U, u( B4 D
欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势)& T* K7 b" J6 g3 I9 B
水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:
% m0 w; Y6 e# W, T6 n2 J- C) ^美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]+ q# B; Y" S) ^ x! P, S/ X
三年水费级别:
+ x9 z) `$ C/ B' G" t美国:$40k+
0 x( r4 |" V2 T- s9 F中国:$20k+
5 ^. W# \" @1 ~/ O- f4 |* R; s结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。
2 B( C# C1 h! _ ]7 [人员成本(3 年) – 假设 500 名全职运维:
p+ s* }, @0 t& c) b8 ?/ U美国:500 × $120k × 3 = $180M+
2 [/ ?0 P* m, B中国:500 × $22k × 3 = $33M+
! j. R! t0 r3 k8 q0 R' R7 { ?差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。
: a$ ~ V( n* U4 N+ y# D6 J整体 OPEX 粗算(3 年) – 400MW 场景下:5 n, m* M2 y' T* K2 C4 l: h# O2 S
) G" X& s9 d2 z! f5 D
项目 中国 美国
; j Q3 F4 e, Q8 f& l电费 $350M $600M
( |( T9 c+ x* d9 C1 E) {9 a& \水费 <$0.05M <$0.05M
5 m7 u8 K( y( q. N$ g6 l) n人员 $33M $184M( O4 j# Y9 Y& t
其他维护/托管 同比例估算,地区差异主要体现在人工与地价 2 V$ S; D% C- u4 f) Y& Q% w
结论:: T3 o9 I! j7 \9 _9 w7 P: S9 l
m2 ]* }* C+ N) B u/ e
就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。+ U o, K* a# o0 r
对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。
' Q4 G! Y5 T, x8 }' C2 X四、基于 token 的成本与利润推演
1 F( p ]) Z4 A) L3 L8 u4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元)' X$ u; k0 C! d J
统一假设:$ S5 J! A& V' w
, `/ d5 j4 c5 V, f0 c: ]
典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])
: L d5 g U7 m. T& l! `; F* |1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh2 S4 m+ f2 D7 Z- E. C$ W% I
1 百万 token:278 Wh = 0.278 kWh5 [' T- a( |/ g8 ?
场景 A:美国电价 $0.30/kWh
( h: g* R. ?% d0 i' A$ S" n, ^电费/百万 token = 0.278 kWh × $0.30/kWh
/ E6 P) f7 y9 B+ o8 ?) I5 q≈ $0.0834 / 百万 token8 E2 N+ ^& u. ?; O
场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh; S+ r; ] @! B e! I; y' ^
电费/百万 token = 0.278 kWh × $0.042
" F5 A) ~6 C* f4 Z+ X" L& p≈ $0.0117 / 百万 token/ W' {( `2 ]0 d( Y5 z. h
对比当前 API 价格(OpenAI 2026Q1)[62]% g* f" [9 R& _! d8 p
以输出侧为主(成本最敏感):
( P; T/ O6 t8 w5 f- u, q9 H" K- {6 [1 \" }" l) ?$ W5 H9 B2 V
模型 输出价 ($/百万 token)9 K0 ]9 H/ K$ v7 I7 |5 @
GPT‑5.2 $14- f+ v' O s1 m, z L+ b
GPT‑5.2 Pro $168! |2 p( [# }+ _0 ~
GPT‑4.1 $8 e. `9 i- J" O/ p3 f
GPT‑4o $102 g* S+ }, R4 f! P3 Z
GPT‑4o mini $0.60
1 o" M8 o' r. }9 i/ _# Y" d则:
0 e* M; X. n3 a% e% |/ c
/ F0 a4 P/ u: U2 }在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。; {. ?# Y! Z4 o' A3 y2 E; z) E
在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。& `; W/ ~ }5 p: ~5 o% \4 m
相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。
4 o; { s$ D! ]结论:
& I# n: V! |1 P2 x" s! I即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。$ k T+ i+ g* X: Z9 h3 v
: W0 K9 v" G5 k j! z, k
4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO)
* p) @7 w% u0 v+ h8 H: ~以 LenovoPress 的 8×H100 Config A 为例[28]:% e3 ^- X( [8 E1 H1 @4 C7 r
1 d7 g8 k7 s1 P3 K$ T% W
5 年摊销下,8×H100 本地推理 70B 模型:
2 \& A% ?3 R6 T& ~% h: b6 C, k+ X小时综合成本(CapEx摊销+Opex):$12.08/h
7 K0 m' d* a! L8 y( f吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens/ Z2 {" Q, o/ T& ` O
成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token1 @3 d# R/ A2 d2 a: J
电费在其中的占比:- T& ~. {4 |& ?# \$ s+ z1 e6 d
Opex 6.37$/h 中电力+冷却约 $0.87/h[28]
) R1 A% s) C0 Y电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token# d! y8 S% D y: F6 K( `. J
电费占 总 token 成本 ~7% 左右。- j9 C9 y# J( l/ e) G; |5 J' ?
若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。- E2 H! a3 x3 k/ C$ [: i4 J: a
若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。
4 g3 I& F" V- A% o
! F" X( Q5 J, {因此:
' \, @) v6 C8 r2 a& ^
: K% B7 ]0 N# D在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。! X& e0 R5 U% y+ d. y
在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。
[) z: R; b2 _5 f" U; P& U; z: G五、不同芯片方案的建设与运营成本对比
; v$ O. k- l5 k5.1 NVIDIA 方案(H100/H200/B200/GB200)% P+ C3 L, V3 O7 Q* I8 ?# Y) M
CAPEX: ~) t: [2 K8 p7 t$ w2 b2 k
4 u: u( t* _( T8 ZH100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。( a0 u9 b3 \; e
H200:显存提升,单卡价更高,8 卡节点约 $280k[28]。9 [5 |" @% {" z
B200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。6 C7 n9 {( s# F+ D s6 x, h) s
GB200 NVL72:
, w3 V9 r C% r7 A0 K& M每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。
# U3 }& x0 c1 s# [4 g( T9 }冷却系统每 rack 额外 $50–56k[35]。
7 S; H# a& x6 r9 F7 N# M在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。; p, }3 Z9 x* i2 C6 a# ?7 `
OPEX & 能效:% Y# f- |5 \: Q
% j3 e/ s- N6 Q单 GPU 功耗:' \& a# c& a9 |' h* d( h5 y
H100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。" N% y3 ^+ K: V8 ?0 W
H200:功耗类似或稍高,但性能/W 提升[9][10]。
$ T; ~4 \$ s+ qB200:标称 1,000W TDP,但实测约 600W 左右[68][69]。
# e$ b* m% E5 l- I' m1 lToken 性能:1 q9 g2 |# ^0 d. L- P/ q1 k/ L
B200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。
3 R n' F- r# p; S) ZNVIDIA 的优势:
7 U4 [2 [% t% J; P% B0 C% g% e
9 g6 x: E1 o2 l( o, n软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。
2 |8 V# R5 f7 t但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。2 k6 }! n# Y" f& T0 f1 L
5.2 Google TPU 方案6 A5 l# b! @# O# u: h) \
CAPEX:
; M& ^% x. j, {' X D3 z5 b8 g3 C0 i8 e B4 Z
单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。
# n, x$ O4 t: f; z% ^5 A3 n3 k: BGSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。9 T4 i3 _) y) v+ U4 @% H/ q
8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。9 }& J' A4 y5 }2 i- k. ^4 ~
能效:
3 O" u1 E( T# D, [- n) N ~7 b; R% v3 l& @0 I6 c. Q. a
TPU v5e vs H100:1 _7 [$ {: y1 [& w" R
同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。
1 Q+ K4 `0 L r! s测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。
1 a! P4 u0 P ^4 f- [: N) R新一代 Trillium/TPU v7:/ @7 v; P6 C& z& [# t b7 S3 ?0 R
能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。; M9 u0 s5 a# s1 `, a
Google 方案的特点:
1 Z7 c2 m5 \& a1 S
3 ?4 }8 G2 u; g" m自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;
3 u$ [. x% n' v5 S9 Q% S对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。. u/ L( I+ z) ]/ [; ?/ j; C
5.3 华为昇腾 910B / 910C 方案6 ~2 k0 n, @0 R& R
CAPEX:
: W: a$ [3 s$ h; \7 V4 n& Z1 W, M! }6 d: t- |
单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。
1 N" A5 j6 g# Y+ a. Q' \) Y# q与 A100 对比:
: O4 I1 r/ i# H& v0 DFP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。
7 e' H# c" C& j: r市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。1 g: V9 ~# h( s, }
使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。8 I* H L. O9 r* o) [" X
OPEX & 能效:
- A# u; {$ `2 E8 W$ f* `
1 m* L: L; t! ?- e# @( G910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。) v( ^; U3 A8 H5 m* X
部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。
- ^* D: R5 v; F8 q在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。
' i# W { p+ e# C+ K' c" A! `$ D8 G5.4 平头哥真武 810E(PPU)方案
r- P& {% [# XCAPEX:
0 L8 o0 U( y: \# s: z, a, X/ u! Z. {* |$ J/ u$ M" [
技术参数:0 p1 r! l% r! \7 W- M; Z+ c
96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。
$ B: f. W5 j4 b# X& a8 q- a" j) d( D! U性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。
. _. g, \8 `) x( V$ ^5 T价格:
1 m6 m( b9 C# v9 ~未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。
& |' m" T+ s, X2 q/ ^# p8 [5 [结合国内报道:
, M7 ~" G& P% G+ Y# T& }/ c6 c2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。
+ C' Y+ X) |" u8 L- \数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。" U' T# q& i a
OPEX & 能效:
& C1 f$ i9 f1 Z" z4 b
o1 s# F) @6 o400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;& W9 W! `# |3 Y% D2 _3 ?# T
在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。
0 v. J+ f; f/ A" A ]% J六、综合比较与策略建议% T/ S4 v* c/ g1 Y) W
6.1 区域维度:在哪里建 AI 数据中心?
, s7 m) e2 l0 Q纯经济性(TCO/tokens)排序(假设无政策/合规约束):
# {/ v' c" F( M' Z0 t
. K' q( u/ g5 F* Y中国西部/北部(电价低、人力低、建设成本低)
- R, w, ]- P& l( y中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)
# D" s4 Z" _' ~/ Z) T: B8 q美国电价低但人工高;东海岸/加州电价上涨压力大 S7 Z4 A& J- L$ o9 \
欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求9 f" I8 u; U( [% @
若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:
$ l0 J4 M6 ]9 S, K6 F3 h% |: \6 m7 }! @2 O1 B1 l/ F% U; |5 q
纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;! F% P: L: a$ z9 ^( k
对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;/ M! Q- U3 G* c, w( b2 P
但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。
( }+ k i* h; a/ R, g1 E1 r& u1 ]6.2 技术栈维度:选哪家芯片/云栈?8 J& W4 S9 |' o! |9 E& A
若目标是全球最优 tokens/$ 且不受出口管制:
L8 c) z* g" ?+ \$ ?) ~
" o4 u+ s" p2 Y3 Q, ZGoogle TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。8 g! |: J8 f- W/ F$ B
若在美国/欧洲,能自由采购 NVIDIA:$ z$ R6 J" n2 ^5 K( w$ L
/ i7 e) A/ q" n
短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:7 c( @# y+ r% ?- b2 W9 h
成熟的软件栈与生态,极高的 tokens/s/GPU;" A9 Q7 I* H6 _1 M2 T! u* N
在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本;
) C V0 I% T* k N但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。: P* Y3 }' i; _% `) k- ]. L- m
若在中国或存在出口管制约束:- D9 q0 {" t/ E3 E5 ]8 n' }
' Q0 s+ v$ P: Y9 P) t昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:
4 P8 M/ @: y; k6 g- H性能上已能覆盖大部分 GPT‑4 类推理需求;4 k2 z. X) V0 y8 L) G4 H/ J
单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;
" h8 D! A- n5 i2 h# S! Z* y r软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;
' e8 ]' d9 r: f$ z" `建议配合:! G# N0 O* L8 j. i, E+ { R: X: ~
高效液冷(PUE~1.1)、
7 R/ N5 Q% l' v8 r1 E大 batch、路由(浅层任务走小模型/低成本芯片)、
( |5 B3 u3 O; R! J强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。
$ s2 m3 m' { x, f长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:
6 s% }; p% j5 t/ E, X9 c+ F$ t
6 m+ b! Y! ^2 @ ?, G8 `数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];
0 `2 K" u( H5 ]0 w- l这意味着:
4 P& @" O. Y% P( {4 m; M优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);$ s. l1 E; M9 X: I B
精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。
$ T3 f& d6 Z0 ?& Z; q) c3 K6.3 针对你关心的具体问题的简要回答
2 } J& i' t4 i U" qAI 数据中心建设 vs 运营成本的大体比例?6 }1 E* q8 [" w0 Z+ c& N: p
8 W4 J, e/ N8 }$ }, E* |$ w
在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。! U% n; Y- ^) {1 B9 c! v; L- h+ e3 }8 o
其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。
8 q- Y! R, @7 j# s, r9 C中国、美国、欧洲、中东的成本结构区别?& A) R* I0 P; j* ~
" y% R. f+ v4 t$ o" r
建设期:4 p- f+ _2 W2 h1 y3 A9 K' X5 Z
中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。
, Z+ K2 e' I/ Z5 y% [运营期:
/ ~+ c+ i4 R+ a, v1 m电价:中东 ≈ 中国西部 < 美国平均 < 欧洲
' j) Q( d$ O% z6 G" Z* P人工:中 国 ≪ 美 欧,中东居中。5 b" J, J0 i7 f' q. G
在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?
0 g7 j# S5 Y7 r! h7 f7 U
9 g1 G0 y" y% U+ n3 S2 a对于典型 1 J/token 推理负载:
: u6 N! y7 Q6 q. Y1 n5 R美国 $0.30/kWh:电费约 $0.083/M token
6 ?- C$ f) D; H( x" y' L- r+ Q中国 0.3 元/kWh:电费约 $0.012/M token
4 v6 l0 a5 M/ ^对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。
/ B0 ]& R' ~1 a: f: F" m& i不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?& i& X1 A; ^- V" j; V$ P
# A! }! w7 U& }
在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;7 E& G& z8 p5 d0 N8 y! X, W: G+ c% d. i
全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;
7 B) m0 k1 T) j, V% }- m2 a中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|