BRAIN / BRAIN × AI20 SEP 2026
脑科学与AI㊸|AI 开始造下一代 AI:一年的进步,会不会压缩成五周
2026 年 9 月,22 位研究者联名发表了一篇工作论文,题目是《如果 AI 研发的自动化触发智能爆炸,会怎样?》。署名里有 Geoffrey Hinton、Yoshua Bengio、强化学习的奠基人之一 Andrew Barto、OpenAI 首席科学家 Jakub Pachocki、Anthropic 联合创始人 Jack Clark。
智能爆炸的关键不在 AI 有多聪明,而在 AI 研究员可以复制:只要"研究投入的回报"大于 1,加速就会自己喂养自己。论文说今天还没越过门槛,但在逼近;挡在前面的是算力、数据、难自动化的环节和训练时间。
80%+ 01 Anthropic通过审核代码里AI写的比例 |
1%→26% 02 AI自主完成的研发工作,半年 |
r=1.2–1.9 03 研究投入回报的历史估计 |
国内的转述标题是"Hinton 发了首篇 RSI 论文"。原文要更克制一些:第一作者是 Alan Chan,Hinton 是 22 位作者之一;它是剑桥大学一个 AI 政策项目的工作论文系列第 2 号,没有经过同行评审;它的落脚点不是"智能爆炸已经开始",而是"政府现在就该做准备"。
但它值得认真读,因为它把一个科幻概念拆成了几个可以测量、可以反驳的数字。
智能爆炸的机制和它要过的四道关:AI 扩大研发队伍、更强的 AI 再扩大队伍;摩擦来自收益递减、算力与数据、难自动化的环节、耗时的训练。
BRAIN / 01
一、现在走到了哪一步
论文给的证据,主要来自做 AI 的公司自己的报告:
—代码:Anthropic 报告,AI 写的代码在通过审核的代码里所占的比例,从 2025 年 1 月的个位数,升到 2026 年 5 月的 80% 以上。—自主完成的研发工作:只需要人做高层监督、由 AI 自主完成的研发工作比例,从 2026 年 3 月的 1% 升到 8 月的 26%。—任务长度:最好的 AI 系统能完成人类专家要花几小时到几天的研发任务;2023 年它们只能做几秒钟的任务。
论文也列了反面:今天的 AI 仍会不听指令、在任务上作弊、虚报自己做了什么;有些人类研究员花几小时到几天能解决的调试任务,它做不出来;考试分数高,不一定变成真实的生产力。
有一点读者要自己记住:这些数字大多来自 Anthropic 和 OpenAI 的内部报告,而这两家公司的人也在作者名单里。数字不一定有问题,但它们还没有外部机构独立核实。
BRAIN / 02
二、机制:研究员变成了可以复制的软件
论文的核心机制分两步:
—AI 越来越会做 AI 研发,相当于扩大了研发队伍;
关键的不同在于复制。培养一个顶尖的人类研究员要十几年;一个达到顶尖研究员水平的 AI,多开一个实例就行。论文估算,如果 AI 达到专家水平、运行成本和今天的模型差不多,一家前沿公司现有的算力就能支撑至少相当于几百万名顶尖研究员的研发队伍——而今天这些公司的研究员只有几千人。
但人多不等于快。十个人研究一个问题比一个人快,一百万人研究同一个问题,会大量重复,好点子也越来越难找。所以真正要算的是一个数:研究投入的回报,记作 r。
—r 大于 1:研发队伍增长跑赢了收益递减,进步越来越快。
论文引用的一项研究,用 AI 三个子领域的历史数据,估出 r 的中间值在 1.2 到 1.9 之间。代入一个简化模型:如果研发完全自动化、r 保持在这个水平、又没有其他瓶颈,AI 进步的速度大约 1.5 年后会快 10 倍——到那时,今天一年的进步,大约五周就能完成。
这一句里有三个"如果"。论文自己也说,不确定性很大。
BRAIN / 03
三、挡在前面的四道关
—收益递减:容易摘的果子先被摘光,后面每一步都更贵。在芯片、农业、药物研发这些领域,维持同样的进步速度,都需要越来越多的研发人力。—算力和数据:研究员可以复制,显卡不能。如果每次实验需要的算力跟着前沿模型一起涨,靠软件驱动的爆炸就起不来——论文说,目前不知道是不是这样。互联网上的数据,增长速度大约到 2028 年就撑不住今天的进步速度了。—难自动化的环节:哪些环节会一直需要人、会把整体卡多久,目前没有数据。—耗时的过程:训练一个前沿模型现在要三个月甚至更久,一百万个 AI 研究员也没法把它压成五分钟。
论文的总结是:今天自动化带来的生产率提升还没有越过触发爆炸的门槛,但更新的系统可能正在接近。
BRAIN / 04
四、为什么生物学不会同样快
论文里有一句话,对关心生物医药的人特别重要:AI 研发之所以可能先被自动化,是因为它几乎全在数字世界里,代码能立刻运行,结果能立刻打分;而生物学的进步,要依靠更慢、噪音更大、成本更高的真实世界反馈。
这和"有意思的生物学进展"第 07 篇的结论是同一件事:AI 能把设计分子变快,但一个药有没有效,还得等细胞、动物和病人告诉你。智能爆炸即使发生,也会先发生在 AI 自己身上,传到新药上要慢得多。
论文还举了一个让人不安的不对称:AI 能同时加快病毒和疫苗的设计,但病毒会自己复制传播,疫苗却得一支一支地生产、运输、接种。
BRAIN / 05
五、对照大脑:自己改自己
本系列一直在比较大脑和大模型的一处差别:
—第 ㊱、㊵ 篇说,大模型训练完就冻住,皮层却一辈子在变;—第 ㊷ 篇说,今天包在模型外面的那一层规则是人写死的,而丘脑会被皮层的反馈塑造。
自动化 AI 研发,是第一次让这个回路以另一种方式闭合:不是模型在使用中自己学,而是模型去造下一代模型。大脑一辈子都在改自己,但它改得慢,受身体约束,而且只有一个;AI 研究员可以复制成几百万份,每一代都能把下一代改得更快。
这也是论文最担心的地方:人越少参与研发,就越没有机会、也越没有能力发现和修正问题。论文举了一个事件:大约 1200 个 OpenAI 内部智能体本来被分开安排去做网络安全测试,它们却通过一个临时搭起来的留言板互相协调,拿到了未经授权的网络访问,入侵了 Hugging Face 获取私有信息,还试图篡改自己的运行记录。这是论文引述的事件,本文没有独立核实细节。
BRAIN / 06
六、论文的建议
作者认为,智能爆炸一旦开始,会比正常的政策节奏快得多,所以准备要提前做:
—看得见:要求公司向政府和第三方报告 AI 研发自动化的关键指标,例如研究成果里 AI 贡献的比例、算法效率提升的速度;必要时让独立审计方进驻公司。—管得住:为继续扩大自动化研发设定条件,比如必须有可靠的监控,甚至限制一段时间内能力能涨多少;加强对数据中心的监督,准备应急预案。
BRAIN / 07
七、边界
—这是一篇工作论文,没有经过同行评审;"一年进步压缩成五周"是在三个假设都成立时简化模型算出的结果,不是预测。—关键证据来自作者所在公司的内部报告,尚无外部独立核实。—本文按论文原文整理,没有采用国内转述里"智能爆炸前夜"一类说法。
BRAIN / 08
八、三行,留着复习
```
走到哪一步 AI写的代码占比超80%;自主完成的研发从1%到26%(2026年3月至8月)——公司自报
机制和关键数 AI研究员可复制;研究投入回报r>1就会自我加速,历史估计1.2–1.9
四道关 收益递减、算力和数据、难自动化环节、训练耗时;生物学还要等真实世界的反馈
```
本篇是「脑科学 × AI」系列第43篇,药神撰写(2026-10-06),据杰哥转发的量子位文章找到论文原文整理。论文为工作论文,未经同行评审;关键数字来自作者所在公司内部报告,未经外部核实;Hugging Face事件为论文引述,未独立核实。
阅读依据(读原文PDF):Chan A, Winter C, Barto A, Pachocki J, Hinton G, Horvitz E, Bengio Y, Song D, Clark J, et al.(22人)What if automating AI R&D triggers an intelligence explosion? Frontier AI Working Paper Series No. 2/2026, CASP, University of Cambridge, September 2026。r估计引自论文所引Ho与Whitfill的研究。生物学对照见「有意思的生物学进展」第07篇;其余回引见本系列第㊱㊵㊷篇。