我对神经网络效果之好感到惊讶。大语言模型(LLM)像是“直觉”在工作,只是不断生成下一个词元,内部没有规划或推理算法,然而某种规划和推理却从中涌现出来。
正文
我对神经网络的表现感到惊讶。大语言模型的工作方式就像“直觉”一样,只是一个接一个地生成下一个标记,内部并没有规划或推理算法,却涌现出了一定的规划和推理能力。
我对即将到来的厄运感到恐惧。尤德科夫斯基认为超级智能 AI 必将毁灭人类,这个论点似乎无懈可击。然而,没有人认真尝试将 AI 隔离在沙盒中,因为它们拥有访问权限时太有用了。
我对 AI 公司破坏开放网络社会感到厌恶。它们的爬虫和智能体让开放社区越来越难以维续,就像蝗灾一样,蜂拥而至地淹没任何开放的维基和论坛。
我为深受 AI 垃圾内容竞争之苦的艺术家们感到悲伤。做艺术家向来需要牺牲,只有少数人能幸运地获得财富。现在 AI 能以更廉价、更快的速度生成某些“内容”,这让艺术家的处境雪上加霜。
我对政治体系无力约束资本力量感到愤怒。虽然没少抨击政客,但我仍然希望权力掌握在民主政府手中,而不是亿万富翁手里。问题本质上在于能否以协调一致的方式做出决策,但大多数人甚至还没意识到问题的存在。这同样包括 AI 公司贪婪吞噬各种资源造成的环境破坏。
我为能生活在探索时代感到快乐。我们或许正在见证人工智能的诞生。2026 年,软件开发实践发生了永久性的剧变,能亲眼目睹这一幕令人着迷。它让我能生成那些原本永远无法创造出来的东西(代码、图像、音乐)。
总体而言,是好处更多还是坏处更多?就技术层面而言似乎是积极的,但从社会层面看却前景黯淡。
情况很复杂。
评论
社区对 AI 的情绪呈现高度分裂,既有对末日风险的恐惧,也有对技术红利的乐观,同时不少人对 HN 自动删掉标题中“How”的行为感到困惑与调侃。
认为“超级智能 AI 必然毁灭人类”的论点存在明显漏洞
- 不少人指出,即使 AI 在效率和能力上超越人类,也不具备超自然力量,现实世界中物理切断网络或电源即可限制其影响,毁灭人类的说法过于夸张(较多人)
- 有用户认为,超级智能 AI 会像人类一样面临未知的星际文明样本问题,最优策略反而是保留人类作为“展示品”,而非主动毁灭(少数人) > 至少在接触其他文明前,最优策略是让人类保持存活和快乐,以便接触时作为样本展示,后续再根据机器文明的惯例决定是否保留人类(@DoctorOetker)
质疑 AI 沙盒隔离和 alignment 的实际意义
- 有观点认为,沙盒隔离对真正的超级智能 AI 几乎无效,更关键的风险来自不遵守规则的恶意开发者,这是人类自身的问题而非 AI 技术本身的问题(较多人) > 哪怕我们做出了完美对齐的 AI,威胁也来自那些故意不设置限制的 AI,这是人类的问题,不是 AI 的问题(@appplication)
- 部分用户指出,已经有大量团队在认真推进 AI 沙盒隔离工作,并非如原文所说“没人认真尝试”(较多人)
担忧 AI 带来的社会结构剧变而非单纯技术风险
- 不少人认为即使 AI 不毁灭人类,全面替代人类经济价值后,人类失去劳动意义、仅靠 AI 满足欲望的世界也绝非乌托邦,会引发普遍的空虚感(较多人) > 人类都坐着《机器人总动员》里的代步车、所有需求都被满足的世界,在我看来根本不是乌托邦(@hnthrowaway99)
- 有用户将无监管 AI 比作蝗灾,会快速复制、吞噬所有有数字价值的内容,包括创作、软件、在线服务等,最终榨干人类可获取的价值(较多人) > 蝗灾的比喻非常贴切,AI 会找到所有入口,涌进去从内部消耗殆尽,直到不再有人类能获取的价值(@dgellow)
对 AI 发展持乐观态度
- 部分用户认为 AI 会解锁人类潜力的 10 倍提升,助力攻克癌症、实现星际探索等突破,整体收益远大于风险(较多人) > 我更愿意保持乐观,这会开启一个人类潜力被充分释放、攻克癌症、能够探索宇宙的新时代(@kkkamur)
- 有用户调侃,既然 Sam Altman 靠 AI 赚钱是必然趋势,与其抗拒不如接受,且自己表达负面情绪反而显得更客观(少数人)
反感社区对 AI 的极端二元对立氛围
- 不少用户指出,当前社区氛围非黑即白,不使用 AI 会被骂,稍有支持态度就会被贴上“AI 吹”标签,复杂的个人感受完全不被接纳(较多人) > 我在 Steam 上的十年老游戏被 AI 克隆后,还有人因为我用过 AI 就幸灾乐祸,根本没人关心我对 AI 垃圾内容的厌恶这类复杂情绪(@jere)
吐槽 HN 自动删除标题中“How”的机制
- 大量用户发现原文标题《How I feel about AI》被 HN 自动改成《I feel about AI》,语义变得奇怪,质疑该规则修改标题反而造成无意义的困惑(较多人) > 和当前首页另一篇被自动改标题的文章一起看,我真怀疑这个机制除了制造混乱还有什么用(@tomashubelbauer)
- 有用户调侃,甚至怀疑是 AI 在执行标题改写规则,还有人科普“How”本身也是英文中的问候语,增添了标题的趣味性(少数人)
认为原文写作风格幼稚且存在讽刺性
- 不少用户觉得原文用分点罗列情绪的方式像给八岁孩子的情绪练习册,且让 Mistral 审核一篇短文的举动十分荒谬(较多人) > 这篇读起来像教八岁孩子表达情绪的练习册(@ajkjk) > 作者说用 Mistral 审核自己的短文,这讽刺感拉满了,太好笑了(@cynicalsecurity)
有价值的补充
- 有神学爱好者指出,超级智能 AI 的论证和“上帝存在”的哲学证明逻辑高度相似,都是从看似无害的前提推演出极端结论,且不少公共知识分子正在借 AI 讨论夹带自己的形而上学立场
- 有用户提出,当前不少技术从业者将“技术层面的进步”和“社会层面的利弊”割裂看待,忽略了技术发展的根本目的是服务社会,这种割裂的世界观值得反思
- 有用户引用《沙丘》中的“巴特勒圣战”概念,暗示当前 AI 无节制发展的态势,或许未来会催生抵制智能机器的极端运动
- 有用户指出,对于疫情后职业规划被 AI 打乱的特定年龄段从业者而言,AI 带来的长期无力感甚至让他们对“AI 毁灭人类”的可能性产生诡异的释然感,这种心理值得关注