“距离奇点12个月”:Matthew Berman的AI研发加速论证与证据边界
Matthew Berman解读了一份关于Anthropic研发加速的独立评估,讨论AI如何参与下一代模型的开发。进步速率、研发流程和内部模型的表现,提供了AI可能正在加快研发的信号;归因证据被删节、评估访问受限,以及自主研究能力仍有不足,则限定了这些信号能够支持的结论。判断的关键在于AI研发反馈已经发展到哪一步,以及它能否持续加速。
一、主讲人与议题背景
《12 months to the singularity》是Matthew Berman / Forward Future的一期节目,元数据列出的主持人为Matthew Berman。节目时长约二十分钟,由Berman解读报告、说明图表并提出判断,形式上是单人评论。节目引用的研究人员意见来自他转述的匿名访谈材料,这些研究人员并未作为嘉宾在节目中接受采访。
他解读的核心文件,是一份关于Anthropic在2026年10月AI研发加速情况的独立评估;所给转录将评估机构名称记为Meter。讨论围绕一个问题展开:模型能力的提升,是否正在帮助研发下一代模型,并进一步改变模型进步的速度。理解这期节目,需要始终分清评估者被引述的结论、Berman对结论的解释,以及他据此作出的未来预测。
标题中的“12个月”也应放在这一评论语境下理解。它提出了节目要讨论的时间尺度,并不代表奇点到来的日期已经得到独立验证。后文各项判断的依据,是Berman所转述的评估材料;其适用范围和可信程度,需要结合材料来源与披露程度逐项判断。
二、本期主要内容
Berman首先讨论的是进步速度。按他的引述,多数评估人员认为,截至2026年10月,Anthropic在明确界定的任务上的能力进步速率,可能约为2024年3月至2025年10月期间的两倍;即使实际速率为1.3倍或三倍,他们也不会感到意外。这一判断保留了相当大的不确定性。它衡量的是特定任务上的能力进步速度,不能理解为模型的整体智能翻倍;1.3倍与三倍也不能当作统一实验得出的置信区间边界。
接下来的问题是,加速来自哪里。节目区分了两个阶段:2025年末的加速主要被归因于非AI因素;到2026年10月,评估者估计,当前加速或许有约80%可归因于AI。这个比例针对的是“当前加速”,不能套用于全部研发成果、全部代码或全部研究决策。Berman还读到一项判断:Anthropic过去一年在基准测试上的进步,似乎相当于2023年10月至2025年10月两年间的进步。这为进步加快提供了另一种比较,但两项判断采用的时间窗口不同,不能直接拼接成更大的倍数。
Berman用一个相互强化的循环解释这些变化:更强的模型能够帮助研发,提高研究人员的产出,也能改善算力利用;这些收益和由此获得的资源又支持进一步研究,推动后续模型进步。在这一机制中,AI即使尚未完全替代研究者,也可能通过辅助工作影响下一轮模型开发。
他援引一份S1文件中的算力效率数字作为例证:2025年第四季度为0.67倍,2026年第一季度处于基准水平,第二季度达到两倍。不过,转录没有解释这一指标的核算口径,因此无法仅据这些数字独立计算成本下降幅度或研发收益。
节目转述的评估材料包括访谈、自报的效率提升、人员规模、代码量、实验使用情况,以及领导层的定性评价。评估因此涉及多种研发活动记录与人员判断,但结论的强度仍取决于这些材料如何相互印证,以及评估者如何排除其他解释。节目披露的信息不足以完整复原这一过程。
三、核心观点:推理、例子与边界
这期节目提供的主要信号是,AI辅助研发可能已经实质性地改变了模型进步的速度。判断这一变化是否构成递归加速,需要区分能力水平提高、进步速度提高,以及加速进一步增强。新模型的一次跃升说明能力水平发生了变化;此后曲线持续变陡,才更能支持进步速率改变的判断;加速能否继续增强,则还需要更多证据。Berman把Opus 4.5和Mythos附近的曲线变化解释为加速信号,但他也明确说,前面用于解释的一张图是虚构的示意图。示意图可以帮助理解趋势,不能作为实际测量结果。
观察到进步之后,更难的问题是归因。节目引述评估者的说法称,他们已经收到令人信服的证据,表明此次加速并非训练算力规模增长提速所致;但Anthropic删去了这些证据的进一步细节。读者可以转述评估者的判断,却无法仅凭节目复原其排除其他解释的过程。细节未公开,并不意味着结论必然错误,但外部读者能够独立核查的内容,仍不足以支持主持人所使用的“证明”这一表述。
匿名访谈补充了研究人员对变化的感受。有人认可超过两倍的提速,有人认为一年取得了超过两年的进步。Berman也承认,这类访谈证据并不科学。这些说法能够反映内部人员如何看待工作变化,却不能直接转化为整个组织统一的生产率系数。不同受访者所说的提速,可能涉及不同工作,也可能采用不同的进步衡量口径;合并为一个效果区间,反而会掩盖这些差异。
报告对自主研究能力的描述,为加速论证划出了一条重要边界:AI尚不能在模型训练最重要的环节作出高度重要且完全自主的贡献,研究人员看到的仍是有希望的早期迹象。AI参与改进模型,距离独立完成整个研究循环还有多远,需要据此判断。一位受访者提到,想法与算力仍是约束;Berman也讨论了人类继续负责选择有前景研究方向的可能性。实验执行得更快,并不自动意味着模型能够选出更值得执行的实验。
Berman进一步推测,足够充裕的算力也许能让模型大量测试研究方向,减少对直觉的依赖。这解释了一条可能的发展路径,但节目没有展示相应能力已经实现,也没有说明模型能否充分覆盖候选方向,或如何处理实验成本、识别失败和判断结果。这一推测仍不能补足当前自主研究能力的证据缺口。
评估中“没有发现瓶颈”的判断,也有明确范围:没有证据表明,算法进步、训练算力、实验算力或数据方面的重大瓶颈会在未来十二个月内产生影响;针对具体瓶颈的部分分析则被删去了。这与员工当下感到算力不足并不必然矛盾。团队当前面对的资源约束,与足以阻碍总体进步的瓶颈,涉及不同层面。报告所警示的未来一年进一步加速的显著风险,同样不能直接推导出一年后必然到达奇点。
评估机构的独立身份,也不能等同于完整访问权。这个项目并未安排评估者获得员工级访问权限:他们可以申请相关信息,但Anthropic有权批准或拒绝,具体访问范围由双方协商。按Berman的介绍,项目从八月中旬开始,投入约2.5名全职当量人员,考察研发加速、AI对加速的贡献,以及近期可能出现的瓶颈。这些条件界定了评估能够回答的问题。Berman由此得出当前进步与奇点之间已无障碍的解释,则在报告所述加速信号之上,加入了他自己的预测。
四、学习与应用
阅读AI进步报告时,首先应明确测量对象、比较时段和归因对象。本期涉及的三项内容分别是:明确界定任务上的能力进步速率、2024年3月至2025年10月的历史参照,以及当前加速中被归因于AI的部分。保留这些限定,才能避免把“两倍”转述为模型整体智能翻倍,或把“80%”写成研发已实现自主化的比例。数字只有与原来的问题放在一起,才保留原意。
对研发团队而言,这期节目能够为流程试验提供线索,尚不足以直接支撑投资回报预测。方向选择、方案实现、实验执行和结果判断,可以分别考察AI辅助的效果,再检查节省的时间是否转化为有用结果。Berman转述,Anthropic研究人员首次发现模型在自主实验中具有实际用途,这是值得检验的信号。但报告同时保留了对关键训练环节完全自主贡献的判断,因此研究方向与实验结果仍需要明确的判断责任。实验数量增加既可能扩大探索,也可能消耗更多算力,预算、停止规则和结果审核都应纳入试验设计。
跟踪模型进步,还需要区分一次跃升与持续的速率变化。Berman转述,未公开内部模型的表现,让进步速率持久改变的解释,比Mythos Preview带来一次性跳跃的解释更可信。后续模型能否延续这一趋势,仍有待观察,不能据此立即外推全年表现。节目还称,模型逐渐使内部基准饱和,Anthropic因而提高了测试难度。更难的测试有助于继续区分能力,但也带来跨版本比较的问题:缺少衔接说明时,新旧分数不能直接连成一条确定的增长曲线。
判断评估的透明度,需要看项目实际完成了哪些工作。原合同包含算力分配核验,尤其涉及能力与安全之间的分配,但Anthropic在形成实质性的算力使用结论之前移除了这项工作。因此,这份研发加速评估不能同时被视为算力分配核验报告,也不能用未完成的核验推断安全投入已经充分或不足。结论能够覆盖的范围,取决于实际完成的调查。
对于这次范围变更,Anthropic给出的解释是先聚焦风险评估,之后再讨论核验;Berman提出的IPO顾虑则属于猜测。报道、内部备忘录或研究笔记都应保留这一归属差别:范围变更是已报告的事项,公司解释与主持人推测也各有来源,不能据此确定企业未公开的动机。
对未来十二个月的判断,可以围绕几个条件持续修正:后续模型能力是否继续改善,AI能否承担更重要的研究判断,以及资源约束是否发生变化。评估称未发现会在这一时段内产生影响的重大瓶颈,但这仍是有范围、且部分分析未公开的判断。现有材料使AI研发反馈成为值得持续检验的机制,尚不足以把某个日期确定为它的终点。
来源
More from WayDigital
Continue through other published articles from the same publisher.
Comments
0 public responses
All visitors can read comments. Sign in to join the discussion.
Log in to comment