根据非营利评估组织 METR 周四发布的一份独立分析,Anthropic 正在以大约一年前两倍的速度改进其人工智能模型的能力,其中大部分加速似乎来自帮助构建自己的继任者的人工智能系统。

美联社报道的这一发现具有不同寻常的分量,因为它们依赖于 METR 所描述的对 Anthropic 内部数据的“前所未有的访问”。来自加利福尼亚州伯克利的团队(全称为模型评估和威胁研究)的研究人员受邀在公司内部进行了大约 11 周的考察,从 8 月中旬到 10 月下旬,他们分析了内部研究数据并采访了员工。

对于关注前沿实验室安全争论的读者,请参阅我们的重大人工智能新闻 报道。

核心发现:进步正在复合

METR 的中心估计是,Anthropic 正在将其模型在明确指定的任务上的性能提高大约是一年前的两倍。该报告直白地指出:“Anthropic 在过去一年中在基准方面取得的进展似乎与 2023 年 10 月至 2025 年 10 月期间一样多。”

更重要的是 METR 认为推动这一加速的因素。研究人员表示,他们能够“自信地”排除计算能力增长的原因——传统上计算能力是与模型性能最紧密相关的变量。他们的结论是:这种改进很大程度上归功于使用人工智能本身进行人工智能研究。

Anthropic 承认,其 Claude 聊天机器人越来越多地帮助该公司开发更新、更高级的版本。 METR 的报告没有发现任何“瓶颈”——例如计算或数据的限制——阻碍这一过程,并指出,虽然人工智能尚未对模型训练的最重要部分做出“高度重要和完全自主的贡献”,但人类研究人员描述了重要的“生命迹象”,这意味着这种情况可能很快就会改变。

调查结果引发了关于经济放缓的争论

对于一家首席执行官一直游说克制的公司来说,时机很尴尬。正是在 METR 评估期间,Anthropic 首席执行官达里奥·阿莫迪 (Dario Amodei) 于 9 月 12 日发表了一篇文章,敦促人工智能行业“放慢提高人工智能模型能力的步伐”,以便安全措施能够跟上。

METR 还审查了 Anthropic 八月份发布的公共风险报告和私人版本,并得出结论认为,该公共文件“总体上低估了正在发生的加速水平”。

Anthropic 的回应:部分同意,大量修改

Anthropic 联合创始人兼公司首席架构师 Sam McCandlish 周四在 X 上发表长文回应了该报道,写道 METR 的许多结论与他自己的观点相符。

他写道:“人工智能正在加速我们的研究,但很难说具体加速了多少。”他补充说,Anthropic 计划在未来几周内发布自己对公司内部人工智能进展速度的分析。

麦坎德利什还为该公司编辑报告大部分内容的决定进行了辩护,这限制了 METR 传达其加速度估计值的精确程度。他表示,分享“到底是什么推动了加速并不是正确的做法”,因为这些信息既具有商业敏感性,又“有可能为其他人提供更快的路线图”——他认为,这将使 METR 担心的风险变得更糟。 “这是一个权衡,”他写道。

重要警告

根据 METR 自己的描述,该报告充满了警告。该组织表示,其主要发现可能夸大了事实:测量到的加速度可能只适用于可以自动评分的明确指定的任务,而不适用于定义前沿研究的更混乱、开放式的工作。或者,Anthropic 可能只是低估了其早期的基线,使最新的跳跃看起来比实际情况更大。

出于透明度原因,METR 的立场也值得注意:该非营利组织通过捐赠资助,不接受评估补偿,多年来一直为 Anthropic、OpenAI 和其他实验室进行能力评估——尽管合作伙伴公司确实提供模型访问权限和开展研究所需的代币。

为什么现在很重要

该分析是在 Anthropic 预计将上市的几周前完成的,这可能是历史上最大规模的首次公开募股,而关于能力日益增强的人工智能模型是否可能逃脱人类控制的争论不断。安全倡导者长期以来一直认为,独立验证——而不是实验室自我报告——是衡量前沿进展速度的唯一可靠衡量标准,特别是在特朗普政府鼓励企业自我监管的情况下。

METR 提出了最后一个担忧:如果人工智能辅助的人工智能研究开始复合,加速本身可能会加速,先进模型的风险以观察者无法轻易追踪的速度增长。该组织的报告表明,至少对于一个领先的实验室来说,该领​​域所担心的反馈循环不再是假设的——它已经出现在基准数据中。

监管机构、投资者和公司高管目前正在关注的问题是,行业其他公司的跟进速度有多快。

---

保持人工智能领先地位

获取最新的人工智能新闻、分析和突破——尽在一个地方。

阅读更多人工智能新闻 →