TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:/ a$ p# T( s# t( {, S- {! e0 P
. D9 a/ B/ g) i9 l- B) t2 `# J一、总体分析框架与核心结论. [- \3 u8 Y5 Z4 N$ `, B2 L& a
1.1 分析框架概览4 z4 ^2 `% s* `6 F
拆分维度. N! V, U* R5 q
: R* T( F$ S1 {8 m阶段:4 | p* ~" e: I5 m5 h
建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施$ h8 s3 N. g" z2 ^ F
运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等
! E. E' H6 q: x$ w! G% e区域: e& g7 [+ @+ k1 c( m8 y) {( X7 b
中国、美国、欧洲、中东(以海湾地区/UAE 为代表)
+ E9 |$ a. z2 R技术方案:. x- U% f- H+ h) t3 O6 V
NVIDIA(H100 / H200 / B200 / GB200 NVL72 等)* M n* M6 Y" B* l6 W: F+ N7 c2 P4 N0 c
Google TPU(v5e/v5p/Trillium 等)2 g0 @ ^9 _; p! F
中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)
9 c( ]/ \) ~/ ?: }* d/ H算例基准
4 P4 P0 e+ h9 a9 c H/ \ ?2 s* e& z* p3 Y$ w% ]
以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:' z6 w7 n y7 ?/ B
其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW
# I `; L \5 s6 S& DPUE 假设约 1.11(高效液冷场景)[1][29]
7 ?1 [" |" A" h2 t. w3 H8 b1 @, x时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28]
8 S2 h, t1 D, g! }, f( r关键指标
1 a5 P# W& j4 O4 }& @( H* ?
: A. b+ o7 Y4 C. l; Z$/MW 建设成本(含/不含 IT 硬件)
- S% X- i2 m6 t( C2 |' }/ M$/kWh 电力成本、L/kWh 水耗
# J8 B1 B* p) ]8 t' _$/token 或 $/百万 token 的综合成本
1 o9 g- A3 _* E/ aToken-per-watt / Joule-per-token 作为能效基准[17][18][26]
- ?* H" V) a6 q' J) j项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租)7 E% h$ z. \: r( ^+ s
1.2 高层结论(供决策快速参考)
& z/ H6 {2 \7 v, ~: `3 T建设成本:AI 数据中心相对传统云数据中心成本翻倍2 @, Y# x( I2 \8 {- `
+ K/ y+ n$ D4 C4 n6 k传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。8 e4 w7 N1 s3 C% x
AI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。& `1 I& c* J, X0 T4 w0 t. w6 z8 K: @
按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。
* W% k6 J) ]/ q区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区4 G9 F/ s# a( s
$ m4 F0 r; S% M) h& I. a9 q' u1 U! A
中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13]
. V6 v/ O6 F2 _( P1 n& i美国:$8–12M/MW,400 MW 约 $4.0B[1], N2 K3 |" L# E8 B" F# O7 P
欧洲:接近全球平均 $10.7–11.3M/MW[2][41]
! _; q( c; U5 e1 n2 x5 [中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]
1 q" ^* H( _( A2 ~/ ~0 ~# L: [: U) u结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。2 [: {! n+ X, g/ r$ f# c6 C- k+ [: _
OPEX:电价与人工决定区域优势
5 Q& _/ |! d, w6 @7 O* i0 f3 ]/ r! T
+ M$ k7 k# S; n) w/ ]电价(2025–2026 工商业大致区间):8 ^# r7 F6 n5 R9 S5 v) l- d) w7 t, i
中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]
4 O- e( s# y( B" C0 `美国:工业用电约 $0.085–0.09/kWh[44]! ^" c( {9 X: X4 N7 J
欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]9 n8 A$ R2 v/ }
中东/UAE:工业用户 $0.07–0.13/kWh[47]
5 s1 [* |6 H- B% V, y8 n8 p人工:0 D; Z# H8 r( q& t: J9 H
中国数据中心运维:约 $22k/人/年
% ~" c5 ~- ?% e' a美国数据中心运维:约 $120k/人/年[1]5 v$ U/ K1 ^0 X6 L q
结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。
8 `! b7 W" u3 t能耗与每 token 能源成本:能效差异远大于电价差异- w8 z8 {0 A/ p) A
; K9 u9 h3 k, `. j* A6 OIEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。
$ d- e; D$ [; o大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。
! D/ R6 Z- `6 V% i& K3 q将 token 能耗约化为统一口径:: ^3 K5 G7 q9 c9 U" ]
粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:) M r6 l# V- U- [. o- X' n) j
中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token8 Q1 j# g. \7 z1 @+ Z9 U9 a
美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token
1 t: a% `! r( ~# M( W3 @对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。/ {. K; x2 E: C! S2 A: D3 a
不同芯片方案的核心差异! H4 \" h' q. r, ?6 a
1 j; W# y$ w$ n% {& A' ?. ONVIDIA Blackwell/B200 & GB200 NVL72:7 F1 H: F7 A. l5 Z6 A. m
单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。
' A- x& l! O V) @8 F: [+ r DGB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。
' y: Q, ?/ F. V6 u; @' J; tGoogle TPU v5e/v5p/Trillium:
2 w9 l/ m( G' Y3 p0 L* S& n5 bTPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。
" v o9 X; H2 ]8 p1 iGoogle 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。7 |3 i" k7 c$ T: ~- b& C$ ~
华为昇腾 910B:
% A. U8 j( m8 s7 B$ H7 z" q" ZFP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。# f$ X0 D' j2 \6 W* g8 G' A' p7 K
单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。7 J* N" O0 ?* A, [
阿里平头哥真武 810E(Zhenwu PPU):3 Z; e$ K/ V5 j+ z
96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。) n9 f9 i% f [& U* w/ S# _& N5 Y
结论:
# k/ s# M5 J& O能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。$ V2 I1 m& i& n
单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。
, `2 Y6 d/ L) E! K! M# z0 j对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。9 ~5 j/ c+ I2 p3 b3 v
自建 vs 云租的 TCO 与 token 成本
. {, a4 V$ |( N0 \* L
; |; e3 \# z q; k% |/ T* [LenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:
1 o+ e& j0 U9 m7 ]' Q0 q6 w8×B300(Config D)自建 5 年 TCO ≈ $1.01M;
; |' c) `& x( n9 R$ ?9 d等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。: q- {/ H" k9 G% K! c5 t. ^
8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。7 P- V9 J9 s& ]0 G5 |8 a6 f; n* Z
Token 成本对比示例(LenovoPress 场景)[28]:' X, g6 ?0 }3 d3 A4 ~
Llama‑70B 推理,8×H100 本地:约 $0.11/百万 token8 n* ~ e. w ~8 j$ H9 i
vs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。
0 ~2 u) l8 Z1 [, {* ?同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。
6 i; J- b$ t3 T: h% o+ b4 VLlama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。
( y9 V5 W* U3 U: `% D' v4 A结论:$ o, h1 y+ Z: Y6 x7 w, P
高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。
% r/ a9 T2 i0 K3 K5 p9 } EToken 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。. b3 @( A' @# C4 {3 S
二、建设期成本分布:区域对比& V$ Z$ Q# v$ Q1 q$ M
以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。2 j7 R/ r* T* B5 o6 W
: t) U; ^: C2 ~# T
2.1 全球/通用结构(以 1 MW 为单位)7 w! e8 t( Z3 v) D" w# b, j" j
综合 JLL、ConstructElements 等[2][41][40]:9 i" G9 J0 _* o
/ H3 v B1 p* Q6 } P/ N1 i1 e8 w壳体+机电(Shell & Core)+ a. I" P6 ~+ j- f
1 A8 s& C V; W" o5 q5 Y$ K8 a4 U; o全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]
) ?: I* G6 l3 `/ l/ c5 f其中按成本构成[40]:! d# u2 K& G; i; A- h: Z# E
电力系统(变电、配电、UPS、母线等):40–50%
+ d( b1 ~* V- `+ C4 s" H机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%
1 K8 P/ D+ d* ]5 V2 e# H建筑与土地、结构:约 15–20%0 A4 a: W. B# F
其他(消防、安防、楼宇管理等):约 10–15%
, D+ b! t8 l0 ~6 gIT 内装与 AI 基础设施(不含芯片); i; k- Y @" `
1 j6 A9 |8 J3 g高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。! H! n0 G0 w- x) R/ l
GPU/加速卡硬件 CAPEX
: o0 T z3 f3 p5 ^- y2 E. f* Z; g4 H: G* I! k
多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。
3 n1 o9 N0 n' ^! B; g2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX
: T" h1 o4 w: L7 i5 H% Q1 H* F结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):9 H- M/ n: k8 Y
7 ]( j' \: ^: k
区域 典型建设成本(壳体+机电,$M/MW) 备注( K) L( U" \5 |" M1 d7 j
中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13]
1 [" u( j8 u* C美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]- G- D: }9 m: G1 N& d
欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41]
f" U# {- N8 e( l' D/ k中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20]
/ h9 j5 [! {; P0 Q. g+ S结论:5 D8 W0 }8 b+ Y$ r* B( P
& p1 E+ {8 S! t+ W7 m* M单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。/ ?$ L1 F9 S! ^0 \
若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。
4 V- [8 J9 m0 M6 h3 h V4 r2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例)
. ~( y2 j$ Y: r2 E/ |4 d以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:& v& K6 F* C5 z- }3 U2 V# o
( G6 i% j4 u$ |& F" c+ P! y假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;
6 Q- J7 S* e; e% F% H. g$ ?! NGPU 配置:3 Z: z1 b/ S8 h/ g. Q
有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);& j* H/ X5 Q, g' c2 T o
每 rack 成本 ≈ $3.0–3.35M[34][69];) u& x; W* x9 V. Q2 X& @8 Q' C: M
GPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。. E/ h( j1 H( p( s# e0 i; |1 n
与不同区域壳体+机电组合:
7 C) s8 `, M: p1 E7 \/ C# P, K& H/ P
以中值估算:
* i8 C w8 I3 {2 W: u- ]- `- }* f1 w
; V* t/ ?7 ^2 B9 X2 |. q; l' @中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B
. g8 n7 A/ L' M* S: b8 r% j: P1 E美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B
3 p3 |8 a2 ], f' J" b欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B- _- h0 z* S$ ~9 L3 _
中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B
& V" ?" q1 E" Q+ T2 Z可见:# ?8 j0 T) G/ n+ d
# o: Y2 X( f; O0 q9 s1 [
GPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。
1 P4 k7 ~3 G2 r% `, b0 i相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。: p# u% t* J7 D' D, M
三、运营期成本结构与区域对比
$ B5 y0 U/ ?) e7 I2 E' x; s3.1 通用 OPEX 结构(高密 AI DC)
' B' s8 V: H0 v9 B/ Y结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:7 h% j$ d# o; L) T$ e' |( s/ A: {
$ |- P+ m+ Q- k1 X; f) O$ |# i+ G0 v电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。6 J) K% ?8 D4 C" [+ q
冷却与水资源:/ D) S5 o: ]+ s$ x
能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。. |& |8 _ V$ r) V$ X& o
水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。
' `5 Z) w+ {+ y0 X6 K人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。
2 | |" E! j. d6 f& c3 g e- Z托管/物业与维护:0 G) c2 k+ p, y) Y0 z: o
托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];
% U5 _' j7 ^& P c硬件维护:LenovoPress 模型中按设备价 12%/年[28]。; J1 W2 B; M, t' P. w4 U( V
3.2 区域差异(以 400MW / 3 年期为例)
+ o- o2 L3 b! e使用 ChinaTalk 的电费与人工估算[1]:
6 q1 W. ^7 v. n. J1 _
( Y/ q0 H: }9 g3 ]0 p5 `2 c2 |/ p [电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:9 D' H0 \6 Y- W- r8 `
中国:约 $0.06/kWh → 3 年电费 ≈ $350M
8 m: S& A, D5 N% S美国:约 $0.09/kWh → 3 年电费 ≈ $600M1 f1 {/ d9 k( |6 K: E% ^
中东:约 $0.07–0.10/kWh → $400–550M
/ |/ L1 B$ H* w, O/ @2 Y' ~欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势)
% Q. v j7 l4 X, ]* ^# v" C8 i水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:5 E @3 F5 `; O0 ]) T& r
美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]9 A+ V1 _7 n- K2 k- V, R6 x# Z- r+ @
三年水费级别:
9 B- ^1 S9 i+ A9 C' n- u美国:$40k+! V! J* x. l- y+ E" o
中国:$20k+* O3 a4 B, f( y3 J
结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。) Q/ {7 H6 ~. ?7 b2 R, L
人员成本(3 年) – 假设 500 名全职运维:
- R' w# Q; M4 b. @ J) j$ l美国:500 × $120k × 3 = $180M+* W4 c. c& p! c7 x1 Y1 D) N) v# h# i
中国:500 × $22k × 3 = $33M+' u: i& p+ z8 E8 t" f% ~
差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。
) @; ^: V# O$ h! x- I' }整体 OPEX 粗算(3 年) – 400MW 场景下:
$ _; m. _3 ^ b# n1 g( V9 n' P5 D: E2 }, }2 M& H [
项目 中国 美国
" Q& y( q8 x0 @) }3 Z, K2 s电费 $350M $600M- L1 B+ q2 s0 M" p
水费 <$0.05M <$0.05M
. B$ Q2 C! t, G7 F" \0 u2 |/ t人员 $33M $184M
d; e; ~" r% m8 Q其他维护/托管 同比例估算,地区差异主要体现在人工与地价
5 m7 `5 H$ @0 c8 t7 o' y, X结论:
0 @, o, v2 f. J' f( g
0 w. J5 s7 }2 G- L就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。& W: e, e7 T1 V5 B
对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。 k0 b) a+ |, O6 P1 b9 b
四、基于 token 的成本与利润推演
- n5 Q$ X2 Z: E4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元)
) C- t9 Y0 t& Y( I! {! a统一假设:
, D3 e8 M: a, ^
A4 ? w& `$ N% d典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])
1 b. b4 O" l+ s- n/ X3 R1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh A# C- k- u" x3 t4 U9 \( O
1 百万 token:278 Wh = 0.278 kWh. e4 K# ]0 M6 I5 E Q' f; Y
场景 A:美国电价 $0.30/kWh
; q6 r7 Z$ C! u( p' K* ?4 }电费/百万 token = 0.278 kWh × $0.30/kWh
9 Q' Q7 c3 V% t# A* H≈ $0.0834 / 百万 token
8 I' O2 K- ^* ^# x. j场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh' z: ~5 ?* e$ k: A9 ^
电费/百万 token = 0.278 kWh × $0.042& T* d& D. F! x# Q- z/ b$ r, Q# v
≈ $0.0117 / 百万 token& Z' ^: G) G& E D
对比当前 API 价格(OpenAI 2026Q1)[62]
. C/ h3 S2 K: A+ \8 U7 P, c以输出侧为主(成本最敏感):( N/ X, @0 b1 S9 e) C: O
: ?/ [$ V4 G8 m模型 输出价 ($/百万 token)4 L. K7 X5 P& S& w j
GPT‑5.2 $14
9 \/ f2 _3 R9 V' ?6 g# XGPT‑5.2 Pro $168* N" N' Y, ]4 `7 M
GPT‑4.1 $8
8 A& Y8 a% i& nGPT‑4o $10' {$ _2 E0 g; F- V' U1 ~ {/ Y
GPT‑4o mini $0.60. \, K- j7 f) |$ ^1 I
则:: e! @+ w: a9 D0 X% g6 n2 r
: A) Q. p* r8 O
在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。
: J4 n8 C2 Q4 H( ~, a# s" i7 B在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。
. I3 ?6 g9 C4 u1 w- {! w* p; _相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。
B* U8 G+ [, u2 y g结论:
9 L' g+ B! [5 d5 b3 f即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。9 S4 [4 r- _+ p3 J. n, {+ |
2 X6 q5 b5 w8 z& J4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO). H; G; R5 K4 y$ w4 F. T2 p! C
以 LenovoPress 的 8×H100 Config A 为例[28]:
! r1 |2 k; Q$ A! V9 J& d' j4 Z l: {5 Y" Y L
5 年摊销下,8×H100 本地推理 70B 模型:5 [2 }! l$ l* A) C4 Q
小时综合成本(CapEx摊销+Opex):$12.08/h
4 E7 W4 I _5 M0 a4 X吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens# l$ T; Q. z6 X- \, A
成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token
7 G' J: ^8 V+ {5 K; b电费在其中的占比:
& h/ f9 H+ g; B* N( Y/ bOpex 6.37$/h 中电力+冷却约 $0.87/h[28]
v- r1 K* Q1 R" M& D' w7 P. [电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token
3 f$ M4 u) S* u; Q电费占 总 token 成本 ~7% 左右。
5 B1 l* O+ d: W2 f& A若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。
, h7 ~ K8 ^3 L9 D% N. _若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。/ o5 Y9 X1 h, ^
- P% W3 T: p D/ F
因此:( i4 q1 D4 Q, A
5 h+ K& T, E. f7 Q) c8 N在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。4 c# E2 x: G2 b4 C9 N, H1 x
在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。% e2 j5 u9 a3 R
五、不同芯片方案的建设与运营成本对比) o% ]2 ~1 _; f, w' o
5.1 NVIDIA 方案(H100/H200/B200/GB200)6 C. r" I; @! P* q
CAPEX:
7 P, r" ~! f/ ~% V, a% ]8 w& a, ]% B) y: I7 Q
H100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。
. y; M. l4 Z9 G4 [3 XH200:显存提升,单卡价更高,8 卡节点约 $280k[28]。
/ v R# X7 n3 N4 X& u9 }B200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。. N& x: R2 e. i# [3 `
GB200 NVL72:
$ R r2 u. Z0 X3 Q5 w$ p每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。
/ X/ L! h+ L: I T, i8 `冷却系统每 rack 额外 $50–56k[35]。
6 ?1 l3 y P; D) }3 i# x5 k8 m在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。
4 M2 d6 L( y+ Z" COPEX & 能效:
; X# v- E* V# ~6 w! a# [
6 q9 j. I( h- R _( ^单 GPU 功耗:
* S- F g5 R) o* ~. RH100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。
+ d1 S4 T; ]" S, |! RH200:功耗类似或稍高,但性能/W 提升[9][10]。
+ q) d+ u. p/ F! p4 Y0 ?B200:标称 1,000W TDP,但实测约 600W 左右[68][69]。
+ o1 q4 X8 @) B" g* [1 dToken 性能:/ L7 } l0 N) u4 J5 r1 c; O% i% o( z
B200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。' Q; J/ M; X. F+ `3 N. q8 D' P
NVIDIA 的优势:
( b% ?3 n, F A% c+ l. Y/ z* n4 n5 V5 J8 h2 l
软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。+ w8 s9 G0 J( I% r
但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。
* j! I. I; v8 b/ D! G n% I9 G5.2 Google TPU 方案
3 C) p& i* c9 `0 t' s' O8 F: HCAPEX:( \; h2 Q& \' q- A y* b
: D, C" p e0 V
单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。/ X% L' \8 U& \# Z
GSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。
5 O1 U* ]6 o ^4 ^6 a2 f: }8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。. f& G6 Y4 `8 a
能效:& x3 a/ I J$ O- g# S
5 _7 a0 H* m/ h5 s
TPU v5e vs H100:3 N* K& @1 H7 Y7 F2 V. U$ H$ v2 W- v
同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。+ q4 L5 Y5 P+ `& ]" ~$ w3 @% _
测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。6 h) i2 h3 ]! v
新一代 Trillium/TPU v7:
" c# X! s* g. w- |' L) R" }5 i0 Z I. ^能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。
1 B4 R/ N7 G- ], A5 C' f8 wGoogle 方案的特点:2 B2 d: f6 ~5 L- L6 \
" H. d, u) W6 N: k
自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;
D3 y0 \" P$ {3 z( b* H对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。, n% R/ B" F8 P4 w6 k8 X
5.3 华为昇腾 910B / 910C 方案
1 d0 i e. X+ NCAPEX:, b8 |) n0 W! {! u+ j% J
6 N) D' O9 s. W% A, u6 j单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。
6 ]/ X( R+ w% f与 A100 对比:8 Z4 C4 e; h7 L( H& \# E0 R
FP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。
" ^# B: `. ]& ]0 h市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。
# O0 L( @2 M& d( X: G使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。
! b: E3 n1 e" I* _. uOPEX & 能效:$ j+ l( C; L- X. ?" x1 i
: @3 N6 K5 k) Q3 i' @0 y' }
910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。
% L% c2 ?& Q2 x: H部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。
/ q) b1 z- {% A在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。
' @9 y% e6 `0 k( F6 ~! b: o5.4 平头哥真武 810E(PPU)方案
* N( Z' N- _5 _! [) jCAPEX:/ }+ T3 c2 p9 a0 S0 p+ Q8 V
, L# ~. ^$ w3 @. t/ u8 U
技术参数:; b* W( K; L$ v" R" i
96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。1 _: B6 {0 O9 z( M% k/ P
性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。5 S2 b& E( |7 t+ ?0 @* G
价格:
4 c/ P& D( k7 a( [未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。
% @9 Y3 T% c1 M- a8 n) A结合国内报道:
. g: e( |: G0 a1 w u5 ?2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。
! X) f+ f1 \+ j8 l2 Z r1 t9 b数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。
& S& Y3 C2 L" L6 yOPEX & 能效:
# y7 `- [) @5 c; c, T3 |$ |
7 S* s, M4 W& G, a1 e( w& O400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;: U2 V( A R. ?3 `% |7 b" m
在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。
3 N; L' I% r/ T4 t3 G- w9 g) y Z六、综合比较与策略建议
4 G$ n8 k5 }: Q' a4 F6.1 区域维度:在哪里建 AI 数据中心?
5 X+ f' [1 t; h* Z5 ~7 D, m# e" T纯经济性(TCO/tokens)排序(假设无政策/合规约束):
[: u& f$ N0 J) ^% p2 f, v: U) I& n* X
中国西部/北部(电价低、人力低、建设成本低) ~+ g& }3 _' Z' Z6 T% w
中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)1 ~8 |0 N6 `1 [( ?& g
美国电价低但人工高;东海岸/加州电价上涨压力大
6 y. w! s9 W. B/ ~6 o2 F% a欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求
! A# ]1 ^7 }* [+ ]若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:
+ h( ]6 M& P. y6 Y
- z$ J; S; x; m$ ~. r) p! R4 p纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;4 p: p2 o$ m2 }$ i& P, U
对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;9 V7 j" M9 }0 m! {
但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。9 b. l+ l% S- }* y$ M
6.2 技术栈维度:选哪家芯片/云栈?; P n/ |3 q; j7 Y) G7 I; c8 a% F
若目标是全球最优 tokens/$ 且不受出口管制:( ^+ r H8 y, C" I, v
( L! h- w6 ~* w" w: y
Google TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。& f6 b5 b6 A3 D! y+ B
若在美国/欧洲,能自由采购 NVIDIA:* e9 X7 I( @' ~" R7 Q6 t
: U5 v' Q% X% }+ I7 E9 d短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:
1 T) u, Q1 H( h7 z. X成熟的软件栈与生态,极高的 tokens/s/GPU;% F. P: L9 N; [" `
在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本;- q- \4 ^9 N" j! F
但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。' d. `: A* r) E; v
若在中国或存在出口管制约束:
1 m. _2 B. c( X; Q8 {# U
' C {2 z7 b1 d- W% n昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:
7 \+ p* h- T0 L; D( u3 _. {性能上已能覆盖大部分 GPT‑4 类推理需求;
5 n# s6 }# _6 G2 ?( Y+ Y单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;
7 n7 X4 r7 S! Z# F# L; H软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;/ M. x% ~) A8 S6 x5 L: u
建议配合: f2 l% W7 \8 Z
高效液冷(PUE~1.1)、 L. _ @" I8 ]- o3 N+ s4 E
大 batch、路由(浅层任务走小模型/低成本芯片)、
9 S- N0 G2 G0 R2 E" c) I强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。
+ o- v5 v+ `' A' `' F. |- B* {长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:- D& ?9 E) C+ l& Q; F! t! |" b
- d! ]* L" W" s# H) w) C
数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];8 |- R( `; ^. f" s" @# D
这意味着:- F. }2 N2 ^% F" g8 D7 R. I
优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);- H! K1 H* I. t% ?5 F) d- b6 m
精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。1 {% }) a8 P% u6 X& x8 A! p2 l
6.3 针对你关心的具体问题的简要回答
( X# ? j& K7 T& sAI 数据中心建设 vs 运营成本的大体比例?! H5 I* H6 T$ Q# ~
- \+ j7 j' v T0 Z在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。
& T+ `* N2 x) R) ?/ X5 N其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。
! p! t' u( V7 n/ p$ J中国、美国、欧洲、中东的成本结构区别?
7 L2 K3 } X7 J0 B, X" L
" @0 G1 R6 k* F6 g& S+ m; G建设期:6 u. `' b- U7 T H; H
中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。
' p/ C7 p# S+ u& e4 f( ?运营期:" j6 b4 _5 @4 Q; ~- j p. v
电价:中东 ≈ 中国西部 < 美国平均 < 欧洲, B) s2 L* l9 @0 T9 v9 r4 U
人工:中 国 ≪ 美 欧,中东居中。$ Q) k6 `$ b7 ]' A, H4 S
在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?
+ }8 r) A+ _0 C( B
. q4 H! C8 i! a8 [6 y c对于典型 1 J/token 推理负载:/ y% Q2 Q$ z+ B% n2 q
美国 $0.30/kWh:电费约 $0.083/M token8 M: _+ \) P. y9 ^' E' d
中国 0.3 元/kWh:电费约 $0.012/M token
; l! g+ e8 G% [6 U. M. t( X对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。8 ] }; w# I8 Q& |
不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?
+ [/ S6 I8 F1 p3 _3 ?
4 f1 K& S) w* J" p1 F! ?, {4 j6 C7 `在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;5 [/ A! b9 V( W8 o8 V
全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;# b* u! L' R0 ]" \% D% E
中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|