我此前提到过对核武器历史与发展的兴趣,如今正在读丹尼尔·埃尔斯伯格(Daniel Ellsberg)的《末日机器:核战争计划者的自白》(The Doomsday Machine: Confessions of a Nuclear War Planner);他因《五角大楼文件》(Pentagon Papers)闻名。第一章里,他回忆导弹差距(missile gap)时期在兰德公司(RAND Corporation)工作的经历,美国当时自认核能力落后于苏联。他把在兰德公司的十年比作宗教团体,与同事为超越性事业共同工作,这类描述与安斯罗匹克(Anthropic)的话术相似。
正文
我之前提到过,自己对核武器的历史与发展很感兴趣。
目前我正在读丹尼尔·埃尔斯伯格(以《五角大楼文件》闻名)所著的《末日机器:一名核战争计划者的自白》。
在第一章里,埃尔斯伯格讲到他在 RAND Corporation 工作的那段经历,当时正处于“导弹差距”年代,美国认为自己在核能力上落后于苏联。
他的许多描述,听起来和如今 Anthropic 等公司流露出的说法惊人地相似。比如,注意一下在企业工作时那种宗教般的意味:
我热爱 RAND,最后在那里度过了十年……我想,很像宗教团体的成员那样,我和同事们共享一种兄弟般的情谊,为了一个超越性的事业与他人共同生活、工作。
他们是“局内人”:背负着他人所不具备的知识带来的责任。
恰恰是在我在 RAND 最早的“导弹差距”时期,以及担任华盛顿顾问期间,我们有这样一种使命感:我们相信,对于前方的危险以及该如何应对,我们比五角大楼或 SAC 的将军、国会、公众、甚至总统知道得都多,并为此背负重任。这是一种令人振奋的重担。
那他们“令人振奋的重担”又是什么?拯救世界:
同事们都有一种感觉——很快就传递给了我——即我们正在最字面意义上为拯救世界而工作。
真正让我印象深刻的是这一段,埃尔斯伯格描述他和同事们如何真心相信末日将近:
从我刚刚接触到的空军情报评估,以及我的同事们和整个国家安全界共同持有的对苏联的阴暗看法来看,我无法相信世界能长久逃脱核浩劫。Alain Enthoven 和我是部门里最年轻的成员。我们俩都没有参加 RAND 提供的极其慷慨的退休计划。二十八九岁时,我们俩都不相信自己有机会领取这份退休金。
这让我想起有报道称,一些 AI 研究人员开始吸烟,以此表明他们相信:在吸烟要了他们的命之前,AI 就会先治愈癌症。
到了这一步,如果听到像 Anthropic 这样的实验室宣布取消所有雇主提供的退休福利,我也不会感到意外。对员工来说,这是个小小的牺牲,用来表明他们相信全民高收入就近在眼前。(公司省下的成本,不过是个不错的附带好处。)
评论
讨论几乎一边倒地充斥着讽刺与质疑,多数人认为所谓AI研究员吸烟、放弃退休储蓄或AI即将带来乌托邦的说法,要么是玩笑、要么是缺乏实证的投机泡沫;少数人则提醒大众可能低估了变化速度,同时呼吁审慎看待AI内部人士的预测。整个讨论弥漫着对类邪教式技术狂热的嘲讽,夹杂着末世将至的荒诞感。
认为“AI研究员吸烟”等说法只是玩笑或未经核实的传闻
- 论据:有人直接点明抽烟信号是个讽刺玩笑;相关消息其实只是Palantir一位CTO的单独说法,并无真正的AI研究者证实;原文宣称要和Anthropic的言论联系起来,却几乎没有引用Anthropic的原话,唯一给出的链接本身也是个笑话。整件事缺乏可验证来源,只因听起来离奇有趣且符合人们的偏见而被当真和传播。(高赞) > 说白了,抽烟这事就是个玩笑。(@sakex)
认为AI公司“乌托邦临近、无需储蓄”的说法是投机与泡沫
- 论据:取消退休福利被嘲讽为“无限休假”的翻版,公司话术还会宣称这对员工有好处;投机性言论不过是拿未来收入在赌博,泡沫迟早破裂。如果全民高收入真要来了,那些正在疯狂敛财的富人为什么不停手?在实验室真正把过半利润放进信托、定期分红给普通人之前,一切都是空谈。有人怀疑是否真有从业者因此不再存退休金。这种笃信世界马上天翻地覆而放弃储蓄的心态,就像末世论者在“被提”(指基督教末世中被提入天堂的观念)前散尽家财一样荒诞。(较多人) > 这就像那些在被提前把财产全部送人的信徒,笃信世界马上就要天翻地覆。(@nkrisc)
认为不应高估AI内部人士的远见
- 论据:AI从业者自己也只是通过训练模型经验性地发现新能力,相比外界其实只有几个月领先,并没有什么特殊渠道能让他们准确预测多年甚至几十年后的影响,因此不应盲信他们的长期预言。面对不确定性,“抱最好的希望,做最坏的打算”才是更稳妥务实的人生策略。(少数人) > 他们自己也只是靠训练模型经验性地发现新能力,凭什么认为他们对几十年的预测就比普通观察者更高明?(@NewEntryHN)
有价值的补充
- 关于人类应对生存威胁的历史,有人指出:自1945年后再未在战争中使用核武器,这其实是人类解决重大协调问题的一大成功,当时核领域的人也自认为在拯救世界;但这只是特定历史条件下的真实威胁应对,不宜简单类比到AI实验室的自我救世叙事上。(@epiccoleman)
- 关于这类AI传闻的传播机制,有人用连锁邮件作比:如今很多在线讨论就像过去的连锁转发邮件,没人知道最初来源、涉及谁、在哪家公司,只因听起来有趣且印证了自己的偏见,就被迅速传播,甚至带上“不转发会倒霉”的迷信色彩。(@paxy)
- 关于变化速度,有人提出一个反直觉的角度:大多数人其实低估了变化的程度,尤其在软件工程领域,继续工作二三十年的假设本身就不太现实——这与对AI公司投机话术的嘲讽形成一种张力。(@user43928)