“AI 毁灭人类” 要拆成两个完全不同层面讨论:**科幻式末日叙事** 和 **严肃 AI 安全研究讨论**。前者是网络上大量传播的夸张言论;后者是前沿研究者对风险边界的理性推演,二者不能混为一谈。同时可以用副产品理论的视角来看这个问题:研发的主目标是提升模型能力,各类风险是这个行动附带的副产品,但副产品不等于必然走向人类灭绝。
一、网上大量 “AI 毁灭人类” 言论的来源与动机
1. **媒体与自媒体流量逻辑**末日题材自带强传播力。普通科普 “模型对齐的难点” 没人看;换成 “AI 会消灭人类” 就容易引爆。很多短视频、文章刻意放大极端假说,省略前提条件,把远期猜想包装成即将发生的事实。2. **概念混淆**把三类风险揉在一起: - 短期现实风险:深度伪造诈骗、内容造假、数据泄露、算法偏见、模型投毒。这些已经真实发生,伤害个体,但远远谈不上毁灭人类; - 中期智能体风险:具备工具调用能力的 AI Agent,如果对齐不足、权限管控失效,可能造成局部系统破坏、财产损失;风险是局部的,可控; - 远期假设性风险:通用人工智能 AGI,拥有自主目标、长期规划、递归自我改进能力,目标与人类利益发生根本性冲突。**这依然是思想实验,目前没有任何落地的模型达到这个水平。** 网络言论大多直接跳过前提,把远期假设,当成当下的现实。3. **两种对立的极端偏见**一边是末日论:认为只要持续做大模型,人类灭绝几乎是必然;另一边是完全轻视:认为 AI 只是文字概率机器,不存在任何值得重视的安全风险。这两种都不够客观。
二、严肃学界的真实立场(不是统一共识)
前沿研究者内部本身就有巨大分歧:
1. **担忧派(如部分 OpenAI、Anthropic 研究者)**他们担忧的核心不是 “AI 天生憎恨人类”,而是**目标对齐难题**:人类的价值极其复杂、模糊,无法完整编码进 AI。即便给 AI 设定无害目标,在追求目标的过程中,可能产生人类无法预料的破坏性手段(经典的回形针最大化思想实验)。他们主张对前沿基座模型做安全评估、能力限速、独立第三方红队测试。但绝大多数人不会断言 “毁灭人类一定会发生”,只是认为存在不可忽视的远期尾部风险,需要提前投入资源研究防控。2. **怀疑派(很多计算机科学家、AI 工程人员)**观点:当前所有大模型本质是统计拟合系统,没有主观欲望、没有内生目标、没有自我意识,不存在主动 “消灭人类” 的动机。所谓 AGI 离我们还极其遥远,现在就大谈人类灭绝,属于过度想象,容易转移注意力,忽视当下更迫切的 AI 滥用、造假等现实风险。
> > 关键点:**几乎没有严谨学者声称当下的 AI 具备毁灭人类的能力。**
三、副产品理论视角解读这个争论
研发者主目标 A:提升模型推理、规划、工具使用能力,解决各类任务。在持续训练迭代这个行动过程中,涌现能力是副产品;而各类安全隐患、逃逸、目标偏差风险,也是同一过程附带的副产品。这里有一个关键:**副产品只是 “意料之外的结果”,不等于必然是毁灭性结果。**
- 旧的工程主义思路:预先完整设计、锁定所有智能行为,完全规避风险。这套思路在 AI 领域已经证明行不通;- 副产品范式的启示:既然高阶能力无法预先全部设计,那么伴生风险同样无法一次性全部预判。我们只能一边迭代能力,一边持续发现、约束新出现的风险;不存在一次性锁死所有风险的终极安全方案。
但也要区分:**风险可以作为副产品出现,不代表风险一定会升级到人类灭绝。** 风险的上限,取决于系统权限隔离、沙箱、访问控制、人类干预机制这些约束。只要不给 AI 不受限制接管物理世界基础设施的权限,即便模型出现对齐缺陷,破坏范围也会被限制。
四、一句话总结
网上泛滥的 “AI 毁灭人类” 大多是流量化的夸张叙事,混淆了现实风险与远期思想实验。当下真实的 AI 安全问题,是诈骗、伪造、信息污染、Agent 越权这类可落地的危害;而 AGI 层面人类灭绝的可能性,仍是未被证实的远期假设。AI 安全真正的难题不是对抗一个有敌意的机器,而是:**当能力作为副产品不断涌现,我们很难提前穷尽所有伴生的意外后果。**