2026-11-06 09:11
最后更新于2026-11-06 09:50
AI123

METR评估:Anthropic能力进步约1.9倍,约80%加速来自AI

11月5日,第三方评估机构METR发布对Anthropic的调查报告称,Anthropic过去一年取得的基准能力进步大致相当于此前两年。METR在8月12日至10月29日约11周内进入Anthropic内部,查看模型成绩、训练算力和研发效率资料并访谈研究人员。

报告显示,自2025年10月以后,Anthropic版综合能力指标ECI的进步速度约为此前的1.9倍。METR估计,截至今年10月,当前AI研究加速中约80%来自AI,另有20%非AI因素细节未获Anthropic披露;METR认为,加速并非来自训练算力规模扩张的速度。

分析纳入三个未公开模型Model 2、Model 3和Model 4,训练完成于今年7月至10月。METR称Model 4在许多常见基准上得分超过90%;Anthropic员工10月内部主观估计其平均提效约12倍。这些模型尚未发布,也不一定会成为公开产品。

报告保留限制:Anthropic研究员认为,AI在模型训练最重要部分尚未作出高度重要且完全自主的贡献,当前收益仍主要来自AI辅助人类研发。METR称未来12个月未见明显阻断快速进步的瓶颈,但信心有限。公布的100页报告经Anthropic大幅删减,最有说服力证据大多被删;配套审查还显示双方对领先指标是“不到两倍”还是“约两倍”(METR算出约1.97倍)存在分歧,该阈值涉及早期预警,双方均认为当时直接灾难性风险较低。

来源
  1. 2026-11-05 16:40 | 36氪:Claude进化速度翻倍了,80%增量来自AI
    阅读原文

    AI 帮助研发下一代 AI 的速度,终于有了具体数字。 11 月 5 日,第三方评估机构 METR 发布一份关于 Anthropic 的调查报告表示:这家公司过去一年取得的基准能力进步,大致相当于此前两年的进步。 从 8 月 12 日到 10 月 29 日,这个机构花费了约 11 周时间进入 Anthropic 内部查看其模型成绩、训练算力、研发效率等资料,并与研究人员访谈。 他们的分析使用了 Anthropic 版综合能力指标 AECI。数据显示,自 2025 年 10 月以后,大模型在该指标上的进步速度约为此前的 1.9 倍,95% 置信区间为 1.5—2.8 倍。 ...

其他新闻

查看全部