AI News

METR 报告:Anthropic 模型改进速度约为 2024 至 2025 年节奏的两倍

Rohan Paul更新于 11月6日 09:00

So much revelation from METR's latest report.

AI 导读

METR 在花 11 周查阅 Anthropic 内部研发数据并访谈其核心研究员后发布报告,称 Anthropic 目前改进模型的速度约为 2024 至 2025 年节奏的两倍,递归自我改进已从理论走向可测量。METR 估计当前加速中约 80% 来自 Anthropic 自身对 AI 的使用,并排除了训练算力增长更快这一原因;报告还认为未来 12 个月内算法、算力或数据都不构成瓶颈。报告指出 Anthropic 8 月的公开风险报告低估了实际推进速度,且 Anthropic 以可能帮助竞争对手为由隐去了 METR 认为最有说服力的多数证据,并中途取消了一项关于算力在能力与安全之间如何分配的检查。

推荐理由

精选AI 评分 80

METR 用 11 周内部数据把递归自我改进从理论变成可测数字,并给出加速来源的归因。

主题

标签

引用

METR

@METR_Evals

自8月以来,METR内部的一个团队利用Anthropic的内部信息,评估AI本身是否正在加速AI的发展。 我们现在发布一份报告,总结此次风险评估的结果。

查看原文

Since August, a team within METR has worked with internal Anthropic information to assess whether AI itself is accelerating AI development. We are now publishing a report summarizing the results of this risk assessment.

查看原帖

正文 · AI 翻译

METR 的最新报告揭示了大量信息。

Anthropic 的递归自我改进(RSI)已从理论走向扎实的测量,而且早期循环的运行速度已经达到约 2 倍。

此前,他们花了 11 周时间查阅 Anthropic 的内部研发数据并访谈其核心研究员。

> Anthropic 目前改进其模型的速度约为其 2024 至 2025 年节奏的两倍。

> Claude 本身就是主要引擎。METR 的最佳估计认为,当前加速中约 80% 来自 Anthropic 自身对 AI 的使用,并排除了训练算力增长更快这一原因。

> Anthropic 自己 8 月的公开风险报告低估了事态的推进速度。METR 是在一项单独审查中得出这一结论的,该审查将公开报告与私下版本及其他非公开数据进行了比较。

> METR 没有看到任何可能在 12 个月内减缓这一循环的因素,算法、算力或数据方面都不存在瓶颈。经删节的证据还暗示,加速可能已经超过 2 倍,并且还在继续攀升。

> 员工自我报告称,Model 4 带来了约 12 倍的生产力提升,研究人员也看到了 AI 独自完成关键训练工作的“生命迹象”。有人称 Mythos Preview 是首个可用于自主实验的模型。

> Anthropic 删节了 METR 认为最有说服力的大部分证据,称这些证据可能帮助竞争对手走得更快。它还中途取消了一项原计划检查,该检查旨在了解其算力如何在能力与安全之间分配。

来源

Rohan Paul