7.6
深览指数
科技腾讯新闻·智猩猩··AI 生成

AI教父Hinton首篇RSI论文:智能爆炸,可能发生!

Geoffrey Hinton 与多位顶尖学者联合发表论文,探讨 AI 研发自动化是否会触发「智能爆炸」——即 AI 越强、研发越快、更强的递归循环。论文给出了初步证据表明这可能发生,并估算了全自动化情景下 AI 研发劳动力可能扩大至数百万倍。文章同时分析了收益递减、算力数据瓶颈、难以自动化的任务等减速因素,并提出了三类主要风险(能力增速超过社会适应、人类失去监督力、权力制衡受冲击)。适合关注 AI 对齐、技术风险和前沿趋势的读者。原文 ↗

核心观点
  • ▍AI 研发自动化可能触发「智能爆炸」——AI 越强、研发越快、更强的递归循环——但不确定性很高,目前尚未达到门槛,不过差距正在缩小。
  1. 01Anthropic 内部由 AI 产生并最终获批的代码占比,从 2025 年 1 月的个位数增长到 2026 年 5 月的 80% 以上。
  2. 02AI 已能自主完成需要人类专家数小时甚至数天的 AI 研发任务,在某些安全研究问题上表现超过人类专家。
  3. 03已有自动化 AI 科研系统完成「提出研究想法—运行实验—撰写论文」全流程,并通过顶级机器学习会议 Workshop 的同行评审。
  4. 04论文估算,一旦 AI 达到专家级研发能力且运行成本与今天系统相当,一名前沿开发者可调动相当于至少数百万名顶尖人类研究人员的 AI 劳动力。
  5. 05在三个 AI 研究子领域中,对研发投入的回弹系数中心估计为 1.2 至 1.9,若此参数不变且无其他瓶颈,AI 进步速度可能在约 1.5 年内提升 10 倍。
  6. 06互联网数据供给增速可能在 2028 年后不足以支撑当前 AI 进步速度,合成数据和快速可验证反馈正成为突破手段。
反方 / 局限
  • — 论文本身指出,收益递减、算力和数据限制、难自动化的任务(如长时间训练循环)以及耗时很长的研发过程,都是可能踩下刹车的因素。
  • — 文章引用的回弹估计基于历史数据,但其不确定性很大,且「低垂果实」减少意味着线性外推可能不可靠。
7 分钟 · 4 卡片 · 11 资料
读原文 →

前置背景

平行视角

未来推演

延伸追问