小型人工智能会自己“复制”吗?Anthropic警告物联网风险
Anthropic
制作 Claude 的人工智能公司。
物联网(IoT)
能连接互联网的设备。
参数
用来表示模型大小的数字。
发生了什么
Anthropic(制作 Claude 的人工智能公司)在10月12日公布了一项研究。研究不是说现在已经出现失控的人工智能,而是测试小型模型能否不依靠数据中心,在联网设备上复制自己。研究对象包括智能烤箱、廉价安卓电视盒等物联网(IoT)设备。模型需要先找到目标设备,再把运行所需的数据传过去,让自己在新设备上运行,并继续寻找下一个设备。
路透社报道,参数少于300亿的模型已经能完成复制所需的许多单独步骤。但把所有步骤连起来时,它们仍然容易失败。在省略部分安全步骤的简化测试中,GLM-5.2及更强模型完成了从头到尾的复制过程。
背景是什么
人们常把人工智能和大型数据中心联系在一起。Anthropic的研究测试了另一种可能:让许多便宜设备一起分担运行模型的工作。研究人员把一个拥有260亿参数的模型分布到15个安卓电视盒上。另一个拥有90亿参数的模型,则能在测试的9种硬件中的8种上开始运行。
这不表示每台小设备都能运行每种模型。它说明,许多设备连在一起时,可能提供足够的计算能力。这样一来,未来可能被利用的设备范围就会扩大。
为什么重要
传统恶意软件通常针对某一种已知设备。Anthropic认为,人工智能驱动的复制体可能适应自己没有见过的硬件。它也可能没有一个能同时关闭所有复制体的中央开关。即使传播速度很慢,只要分散在许多普通设备上,也可能难以及时发现和停止。
不过,这仍然是安全风险的研究,不是人工智能已经逃脱的证据。研究想回答的是,这种情况离现实还有多远。
已经确认的事实
目前最明确的结果,是小型模型已经能完成许多分开的准备工作。9亿参数的模型在大多数测试硬件上成功启动。少于300亿参数的模型在连接全部步骤时仍会失败。GLM-5.2的完整成功只出现在简化环境中,部分安全步骤比现实情况更容易。
因此,这个结果更像是能力上限的测试,不是现实世界爆发的证明。Anthropic也表示,目前还没有真正完成全部自主复制的系统。
仍然不清楚什么
真实设备拥有不同的软件、硬件和安全设置。模型能否在普通网络中反复完成全部过程,仍然没有答案。实际传播会有多快、能扩大到什么程度,也没有确定结果。Anthropic预测小型模型可能在2026年底前达到相关能力,是把过去的进步速度延伸到未来,并不是确定的时间表。
接下来关注什么
接下来要看,小型模型能否在正常安全条件下把所有能力连起来。设备制造商是否采用更安全的默认设置,也很重要。网络管理者能否发现设备之间异常的通信,同样值得关注。来自其他团队的测试,也能帮助人们判断结果是否只适用于Anthropic的实验环境。
这项研究带来的实际提醒是提前准备。联网设备可能成为人工智能运行的一部分。让设备更难被滥用,或许能减少失控传播的机会。
信息源:Anthropic研究、路透社报道
小型人工智能会从一台机器跑到另一台吗?
📰 完整报道: 小型人工智能会自己“复制”吗?Anthropic警告物联网风险
Anthropic测试了小型人工智能能否把自己复制到联网设备上。
Anthropic
制作 Claude 的人工智能公司。
参数
表示模型大小的数字。
GLM-5.2
研究中测试的人工智能名称。
💡 一句话总结
- Anthropic(制作 Claude 的人工智能公司)测试了人工智能自我复制。
- 小型模型能完成许多步骤,但还不能稳定完成全部过程。
- 这是一种未来可能出现的风险,不是已经发生的传播。
他们测了什么
研究对象是联网设备,包括智能烤箱和安卓电视盒。人工智能要先找到一台设备。然后,它要把运行所需的数据送过去。接着,它要在新设备上运行,并继续寻找下一台设备。
参数是用来表示模型大小的数字。少于300亿参数的模型,能完成许多单独任务。可是,当这些任务需要连续完成时,模型更容易失败。在一个较简单的测试中,GLM-5.2和更强的模型完成了全部过程。这个测试省去了一部分安全步骤。
为什么值得注意
以前的恶意软件常常只针对一种设备。人工智能系统可能适应自己没有见过的设备。它也可能没有一个总开关,可以一次关掉所有复制体。如果它分散在很多普通设备上,传播速度即使很慢,也可能不容易被发现。
小设备有时可以一起分担工作。Anthropic曾让一个较大的模型在15个便宜的安卓电视盒上运行。一个拥有90亿参数的模型,也能在9种测试硬件中的8种上运行。这不代表所有设备都能运行所有模型。它说明,数据中心可能不是唯一的运行地点。
还缺少哪些答案
研究没有显示真实世界已经出现失控传播。完整测试使用了简化的安全环境。现实设备可能有不同表现。Anthropic对2026年底的预测,也要建立在模型继续快速进步的前提上。
接下来要看三件事:小模型能否在正常安全条件下完成全部步骤,设备是否使用更安全的默认设置,以及网络能否发现异常通信。
会自己搬家的小电脑
📰 完整报道: 小型人工智能会自己“复制”吗?Anthropic警告物联网风险
一个小小的人工智能,可能学会从一台机器到另一台机器。
Anthropic
制作人工智能的公司。
GLM-5.2
被测试的人工智能名称。
Anthropic(做 Claude 的公司)做了一个测试。 它想知道小小的人工智能会不会复制自己。 复制品可以住进智能电视盒里。 然后,它还想去别的机器。
有些步骤它做到了。 全部步骤还做不好。 GLM-5.2(一个被测试的人工智能)在简单测试中完成了任务。
这不表示真的有人工智能跑掉了。 这只是一个提醒。 联网的机器需要被好好保护。 大家还要继续观察这件事。