aifollow.news
Back Rohan Paul
Rohan Paul· @rohanpaul_ai · X· · Original publication time AI score60

METR report says Anthropic’s AI research pace is about twice its earlier rateMachine translation

AI introduction

A METR team used internal Anthropic information to assess whether AI is accelerating AI development. The supplied account of the report says Anthropic is improving its models at about twice its 2024–2025 pace, and that METR estimates roughly 80% of the current acceleration is due to Anthropic’s use of its own AI. Some key evidence was redacted, limiting scrutiny of the assessment.

Original post · AI translation

@rohanpaul_ai
Translation · refer to the original

METR 的最新报告揭示了许多情况。

Anthropic 的递归自我改进(RSI)已从理论走向扎实的测量,早期循环的运行速度已达到约 2 倍。

此前,他们花了 11 周研究 Anthropic 的内部研发数据,并采访了其关键研究人员。

> Anthropic 目前改进模型的速度约为其 2024 年至 2025 年速度的 2 倍。

> Claude 本身是主要驱动力。METR 的最佳估计认为,当前加速中约 80% 归因于 Anthropic 自身使用 AI,并排除了训练算力增长加快是原因的可能性。

> Anthropic 自己于 8 月公开发布的风险报告低估了进展速度。METR 在一项单独审查中得出了这一结论;该审查将公开报告与非公开版本及其他未公开数据进行了比较。

> METR 没有发现任何可能在 12 个月内减缓这一循环的因素;算法、算力或数据方面都不存在瓶颈。经过删节的证据还暗示,加速幅度可能已经超过 2 倍,并会继续上升。

> 员工自述使用 Model 4 后生产力提高了约 12 倍,研究人员也看到了 AI 独立完成关键训练工作方面的“初步迹象”。一名研究人员称,Mythos Preview 是首个可用于自主实验的模型。

> Anthropic 删去了 METR 认为最有说服力的大部分证据,称这些证据可能帮助竞争对手加快进展。它还在中途取消了一项原定检查,即核查其算力如何分配给能力开发与安全工作。

QuoteMETR@METR_Evals
Translation
自 8 月以来,METR 内部的一个团队利用 Anthropic 的内部信息,评估 AI 本身是否正在加速 AI 开发。 我们现在发布一份报告,概述此次风险评估的结果。
Original

Since August, a team within METR has worked with internal Anthropic information to assess whether AI itself is accelerating AI development. We are now publishing a report summarizing the results of this risk assessment.

View this post on X ↗

Source: Rohan Paul · x.com

Research
Found an error? Send a correction