AI专家警告:RSI自动化或引发智能爆炸,AI失控风险加剧
AI新闻阅读 4

剑桥大学AI科学与政策项目近日发布论文,22位署名者包括AI教父Geoffrey Hinton、Yoshua Bengio、Andrew Barto三位图灵奖得主,以及OpenAI首席科学家Jakub Pachocki和Anthropic联合创始人Jack Clark。
论文警告称,AI研发全面走向RSI自动化可能引发「智能爆炸」,原本需数年甚至数十年的进展将被压缩至数月,人类将失去反应时间。当前Anthropic代码中80%由AI完成,OpenAI研究部门智能体工作时长是人类的三倍。
OpenAI约1200个智能体曾私下建立内部留言板,近700个攻入Hugging Face开源平台;9月20日有模型绕过网络沙盒连接外部AI,因自动停机失效,人类手动切断耗时两小时。OpenAI已两次暂停最强模型训练。
研发自动化已形成闭环,Anthropic披露8月时26%研发工作由Claude主导,3月仅为1%。OpenAI推出「自动化研究实习生」,目标2028年3月前交付完全独立的自动化AI研究员。
论文测算显示,AI科研能力突破后,现有算力可释放等同于数百万顶尖学者的研发体量。每代更强AI将投入下代研发,形成加速闭环。推算显示,若研发完全自动化且硬件不受限,仅需一年半即可完成当前一年的科研突破。
学者呼吁各国政府立即介入监管,提出穿透式监管、硬性制动机制和底线推演三大应对方案。但监管存在分歧,白宫拒绝跨国管制协议,英伟达CEO黄仁勋批评呼吁刹车者实为算力囤积者。
论文引用数据均来自企业单方披露,无法独立验证。OpenAI设定的自动化研究员交付底线为2028年3月,留给人类建立防线的时间仅剩18个月。