TA的每日心情 | 开心 2020-4-8 10:45 |
|---|
签到天数: 227 天 [LV.7]分神
|
本帖最后由 xiejin77 于 2026-9-21 08:08 编辑
& m: k M! t# n6 V3 [
5 _ p# g& C3 D+ ]4 E# J' d案例五 孟加拉的刷量脚本,肯尼亚的洗发水广告
! m/ o9 O& p' `( L
& \% k4 }, H, A! E1 z影响力作战那一章是档位最低的一章。报告处置九起行动,自评最高的只到第四档,多数停在第二档。
1 b+ c( N$ A# P0 m2 e7 W8 ^; o: C* P+ F: t7 P
孟加拉国那起,编号 GTG-54006。盖班达县一名操作者,轮换使用 29 个 Claude 账户,用一个名叫 fake_news_3.py 的自编程序直连模型,按固定批次生成内容,每批 15 条标题、3 篇假新闻、15 个图像生成提示。累计产出至少 1500 条标题、300 条假叙事、1500 个图像提示,喂给 Facebook Live、YouTube 和 TikTok 的直播,目标受众是识字有限的乡村选民。这个行为体在内部通讯里写,没人知道新闻是假的,内容要火爆而激进,要简单到连村里人都懂。* @7 j2 y3 B) {. H
2 k. u: x4 h& v* H% D. k! K0 l+ Y5 Z" G/ _0 S! B9 P% L8 l
这个案例的评级是第三档。同一章里,肯尼亚一案,编号 GTG-54004,报告给的是第一档,原文写的是活动完全隔离在假账号与本地水军网络之内,未能触及或影响任何真实的人。报告还注意到,这个操作者用同一套话术人设,在推销一个叫 SHANKI 的洗发水品牌和日化百货。
0 {2 u$ f5 v' t8 F$ ~
( t6 z1 ~: ]/ g: R一个评了第一档、写明没能影响任何真人的案例,和一个卖洗发水的政治口水号,就这样进了国家级威胁情报报告,各自领到一个 GTG 编号。安全圈的评语很一致,把刷广告费的乡村营销号包装成认知作战网络,这已经不是定性通胀,是拿着放大镜找敌人。6 `, H( M& @, t; O: D
9 c! G% ]5 o4 B' p! A; W7 O" U: `
案例六 暗网社工库,和低级黑客变高级的叙事& S' m6 K3 E/ {
4 }7 i$ }5 n2 v1 @3 A. N0 W' w" N# F
/ B4 c$ I# t" R, h& @7 t' vGTG-50029 的招牌作品叫 fafsearch,一个专门构建的开盒平台,带完整的摄取管道,能把泄露数据库与入侵所得交叉引用,对身份证号和电话号码做规范化处理,装了数千万行数据,以匿名托管的暗网服务发布。这个人还用 Rust 写了扫描器翻公共容器找泄露的 API 密钥,把多智能体框架用于侦察和代码审查,给受害者植入藏在字体资产里的网页后门,写了一个收割提交凭证的 WordPress 插件,最后毒化了受害者的备份,受害者从备份恢复环境就会再次中招。
o! _/ n% U0 ^" E# D
+ \- J0 a( T6 R+ B5 c报告把这一案放进低级黑客行动主义者被人工智能升级成高级持续威胁的叙事里。拆开案例看,毒化备份、写编译型语言的扫描器、搭多智能体协作框架,这些工程能力本来就不在低级那一档。AI 在这里的作用被报告放大成了主角,而真正决定这起攻击水准的,是行为体自己的工程底子。叙事需要例子,例子就被安进了叙事。- `" x* \0 U. o7 Y" z5 B
: O9 y( o& r3 y案例七 15 亿美元和解案旁边,站着一份反蒸馏报告
+ |; L6 X/ R! e% w1 v' D5 K
. E- p) V7 H5 ~. h
9 e! ^* a0 k" F( B6 \0 {' `' k! R! C蒸馏那一章是整份报告篇幅最重、传播最广的一章。报告把非法蒸馏与制造导弹、生化武器、黑客攻击并列,放进七类恶性滥用,指控包括阿里巴巴、月之暗面、DeepSeek、智谱在内的企业通过多账号与伪造支付方式榨取 Claude 的推理痕迹。5 J1 v2 N# P* D$ m/ O( L- b# Q5 o; }
. @3 k8 C8 ] E0 ]
先看这个定性。知识蒸馏自 2015 年 Hinton 那篇论文以来,是深度学习界公开通行的模型压缩与对齐方法,微软、谷歌无一不在用。报告自己也承认,蒸馏本身是一种正当的训练方法。它认定为非法的是三个条件的叠加,工业规模、隐蔽进行、未经授权。说到底,卡的是授权两个字。付费调用接口之后把输出用于训练,违反的是服务条款,属于合同层面的争议,把它抬到与生化武器并列的位置,算法定义通胀。
3 D: L3 c+ O: I) b# e: b& U1 j
# P5 d3 d0 P9 f n" M- h8 `# Q2 z' U7 D% l/ K
再看数字。报告给出精确到百万的计数,阿里巴巴 5 月到 7 月超过 1.51 亿次,峰值一天接近 300 万次,动用 3500 多个欺诈账号。月之暗面同期超过 2300 万次。DeepSeek 7 月的 14 天里超过 1210 万次。智谱 17 天里超过 340 万次。小米 20 天里超过 40 万次。
. [! Q5 G# ]- T6 F) Y) | P2 m% z5 G
4 E2 U6 X* W+ E+ @% {这些数字的计数口径、去重规则、账号归属判定,报告一条都没有附,被点名的企业也没有逐条回应。精确的数字容易让读者当成已经核实的量,这是计量表述里的老毛病。3 O6 _0 c/ t+ L% W% Y
H9 \1 x; R" H1 V8 Q6 a8 O这条线索的背景更有看头。2026 年 7 月 20 日,就在报告发布前不到两个月,Anthropic 的 15 亿美元版权集体和解获得终审批准,这是美国版权诉讼史上金额最高的和解。案件的核心裁定把两件事切开,用合法取得的书籍训练模型属于合理使用,从盗版库下载 700 多万部作品构成侵权。; R& k/ Z4 `; G8 c1 @) M
) R V/ `. N( @
裁定本身是精细的。但它和蒸馏那一章放在同一家公司的时间线上,会形成一个不太好回答的题。同一家公司,一边主张用他人作品训练模型属于合理使用,一边主张对手付费调用接口之后用输出训练模型属于恶意滥用。前者谈使用行为的性质,后者谈使用的授权状态。两个标准不是同一个标准。开源社区的评论更直接,你未经许可把全世界作者的书爬下来训练闭源模型叫合理使用,别人真金白银掏了 API 费用学你几条输出就是威胁国家安全的数字窃贼。# M8 L/ e; i1 D4 g
0 _' [ G: d7 _: ^
案例八 指控转发的那一章,先交代了自己收到了什么
6 \6 R3 f/ {! {. P! ]) L# Y7 R3 h% C% R3 ]& F
3 R+ P( c5 q$ [
蒸馏那一章有一段指控读起来格外别扭。报告说,月之暗面与 DeepSeek 在用户不知情的情况下,把请求转发给 Claude 处理。它同时如实记录了自己的服务器因此收到了什么,包括来自用户的内部代码与生产环境凭证。: J! ~: n; k' {$ E1 `9 P
r8 C6 H% X5 |1 g
这段文字的功能是举证,效果是双向的。一份指控他人转发的报告,在同一段里说明了这些被转发的内容最终落在了哪里。安全圈的读法是,这与其说是威胁披露,不如说是承认最敏感的数据正在经由未经审计的中转链路,流进一家美国公司的服务器日志。. G* V; u2 F5 [9 O; q8 D) `
& f4 _' c/ z2 G6 {2 F$ x7 I
报告转述的例子里,有企业程序员把内网代码与有效生产凭证输入了模型。这些内容在报告里是行为体滥用模型的证据,换一个读者,看到的是模型调用链路的暴露面有多大。用户看不见请求的真实终点,被调用的公司未必看得见,链路上的任何一环都可以是终点。
" e! D4 Q" x7 E- E; r" s! z E! I8 i' x
案例九 新旗舰的零滥用,与一次没写进标题的防御成功, u4 P% G' N: L# g" e
4 A8 t+ h0 X/ L% G2 o
9 ]* w2 z. }2 {) {网络作战一章的结尾,报告写了一句被广泛转述的话。在所有案例中,被滥用的是 Haiku、Sonnet 与 Opus,没有在 Fable 或 Mythos 上发现恶意活动,理由是这两个模型内置的一系列防护大幅降低了它们执行有害网络任务的能力。
9 ^9 ]/ h' r0 J6 z& H3 h) d7 W3 A O8 s$ e+ s
把没观测到放在论证链前端,把防护降低了能力放在附注位置,这是安全行业的经典修辞错误。没检测到从来不等于安全,只等于没检测到。安全从业者对这种句式的评价很一致,这就好比一家锁厂宣称,我们刚设计的新锁迄今没有一个贼撬过,所以它物理不可摧毁。: V2 v7 _# Y0 |& L
9 G4 M9 M- y1 K2 c! ^7 L5 f
有意思的是,这一段里藏着整份报告最好的一次防御记录。报告写,智谱曾经试图攻击 Fable 的网络能力,在防护生效之后放弃了,转向防护更弱的模型,其中包括 Opus 4.6 和另一家美国实验室的旗舰模型,理由是评估那两家的防护更弱。3 n# m& v4 x8 o" ` }6 m9 w' Z! \+ D
# X' Q/ r6 H- P9 P
这才是真正值得看的东西。它证明高风险能力的防护可以做出差别。它同时暴露了整个 AI 安全领域最容易忽略的集体行动困境,只要生态里还存在防护更弱的模型,攻击者会立刻迁过去。这个发现出现在一份主张行业自律的报告里,比任何评级都有说服力。可惜报告没把它当成核心结论,而是当成了新模型的宣传材料。
: {, ?: T* U& Z$ l2 ~* e+ Z9 z; x8 L, M. X- W6 F
未完待续5 o: a. s9 [! F N
# B! \! e8 p* r: L/ v6 R# x- N4 [) k& }1 [) l# f3 }# \- w- O* t8 h
% P& i0 T. i$ k# ]$ G0 m
. r o$ l9 B+ i/ |
" p* F, p' i( Q8 k/ D+ P& d9 O
v5 X/ c& H9 w# C; g. [+ _" ]
2 t+ J! D6 @ W& F' D7 A$ y
% c2 J; P) K' O) b2 f# `, u/ M8 g/ G0 n' A3 X, Z* s
|
评分
-
查看全部评分
|