METR 在 Anthropic 內部待了 11 週。數字是 1.9,而大部分證據都被塗黑。

METR 本月發表了一份獨立評估,探討 AI 是否正在加速 AI 研究,依據是十一週在 Anthropic 內部取得的罕見權限。報告的主要估計是:自 2025 年 10 月的某個轉折點以來,Anthropic 可量測的能力進展速度約為先前速率的 1.9 倍,95% 信賴區間為 1.5 到 2.8。
換算成指數:之前約每年 15 點 AECI,之後約 29 點。等於把兩年的歷史進展壓縮進一年。METR 把這個幅度比擬為從 Claude 2.1 跳到 Sonnet 4.5。
第二個重點是,約 80% 的加速可歸因於 AI 被用在 Anthropic 自己的研究上。第三個是,METR 認為最具資訊價值的證據,多數被 Anthropic 塗黑。
這三句話必須一起讀,而幾乎沒有人一起讀它們。
存取權限長什麼樣子
從 8 月 12 日到 10 月 29 日,一支約 2.5 名全職人力的團隊取得了 pretraining 與 RL 指標、訓練算力數字、未發布模型的內部基準分數、內部加速分析、模型預測,以及約十五場與 Anthropic 研究員的訪談和員工調查。METR 未向該公司收取任何費用,基於安全理由在 Anthropic 的裝置上工作。
分析涵蓋三個在 2026 年 7 月到 10 月間完成訓練的未發布模型。這正是它與以往每一次外部評估不同之處,過去只能看已發布的模型和公開基準。
METR 也提出一項否定性發現,其重要性不亞於正面結論:它有信心加速並非由訓練算力成長加快所解釋。除了投入多少硬體之外,工作完成的方式也變了。
80% 是判斷,不是測量
沒有任何儀器可以直接讀出「這次加速有多少來自 AI」。METR 結合基準軌跡、訓練指標、訪談與調查,得出一個歸因估計。
訪談材料是最具體的部分。一位研究員告訴 METR,現在的工作「只受想法與算力限制,不再受程式碼限制」。其他人表示,過去要花一到兩天架設的實驗,現在幾乎不花成本。在 2026 年 10 月的非正式 Slack 投票中,員工估計最新的內部模型讓他們的生產力提升約十二倍。相較之下,同一項指標在 Claude 3.7 Sonnet 時約為 1.2 倍。
METR 稱這些自我評估是極為寬鬆的證據、不具代表性,且很可能高估真實增益。十二倍是人們在原本煩人的工作突然不煩人時會報出的數字,而它經不起碼錶的檢驗。
所以這個主張的誠實狀態是:1.9 倍加速中有一大部分,可能大部分,或許 80%,可追溯到 AI 輔助。那句話裡的每個字都在發揮作用。
門檻有一個數字,而這就是問題所在
Anthropic 的 Responsible Scaling Policy 3.4 版於 2026 年 7 月 8 日生效。它列出兩個與自動化研究有關的觸發條件:AI 系統能以具競爭力的成本取代公司的研究人員,或是進展速度加倍,且可合理歸因於研究或工程自動化的相當部分。政策把「加倍」定義為一年內完成原本需要兩年的進展。
當稽核者回報 1.97 時,一份明訂兩倍門檻的政策就產生了一個明顯的問題。Anthropic 2026 年 8 月的公開報告說加速「不到 2 倍」。根據對該評估的報導,它自己未塗黑的內部版本則暗示 1.97。該公司曾說跨過門檻是可能的。在 11 月 2 日提交給美國證券交易委員會的文件中,它表示「可能即將符合」自己對大幅加速進展的定義。
METR 另外判斷,早期預警門檻在 7 月 15 日之前就已經被跨過,這是可能的。
把那串順序再讀一次,因為它很奇怪。一家公司寫了一條含數字的規則。一位擁有內部權限的外部稽核者,估出一個略低於該數字的數值。然後公司告訴監管機構,它可能即將跨過那個數字。沒有人說過門檻已被跨過。
這不必然是迴避。Anthropic 把該門檻描述為早期預警,而非嚴重風險已經到來的證明,並表示它尚未達到完全自主開發接班模型的程度。政策門檻一旦觸發,就應該啟動防護措施,而哪些防護措施是一個真實的問題,無法用新聞稿回答。
但這確實意味著,這套機制目前產出的是聲明而不是行動,而那些聲明都小心翼翼地加了但書。
塗黑才是重點
METR 說 Anthropic 扣下了評估者認為最具資訊價值的大部分材料,包括未來的模型預測與瓶頸分析。稽核中原本規劃、關於公司如何在能力研究與安全研究之間分配算力的一部分,中途被取消。
後果很具體。大眾無法核對這個估計。1.9 這個數字取決於基準的選擇、轉折點放在哪裡,以及對任務難度的假設。METR 自己的敏感度分析顯示,依這些假設不同,估計值會在 1.1 到 2.9 倍之間移動。
還有一個較少被注意的數字。當 METR 把 Anthropic 拿來與所有開發者的前沿模型比較,而不是與 Anthropic 自己的歷史比較時,估計速度從每年約 17 點升到 24 點,也就是 1.4 倍。METR 認為差異可能反映 Anthropic 正在從前沿後方追趕,或反映較早模型被調校以迎合基準的程度不同。
一家公司 1.9。整個領域 1.4。兩者都是加速。只有其中一個接近觸發一條以兩倍為中心寫成的政策。
怎樣才能讓它可被檢驗
誠實的答案是:已公布的材料中,沒有任何東西能讓外部人士複現這份分析,而這是評估一家私人公司的結構性特徵,不是 METR 工作的缺陷。
能改變這件事的做法:公布 AECI 基準的組成與權重,讓這個指數在機構之外也有意義。釋出轉折點的方法論。讓第二位評估者在相同條件下看到被塗黑的材料。以及把目前被混為一談的兩個問題分開,也就是進展是否加速,以及 AI 是否造成了它。前者可測量,後者是推論。
還有一個 METR 提出但沒有回答的問題。它沒有找到會在未來十二個月減緩速度的瓶頸,這意味著進一步加速是現實風險,而不是已經定案的問題。如果目前的速度維持、複利繼續,兩倍就不再是門檻,而會變成描述。
對實驗室之外的人來說,實際結論比新聞標題狹窄得多。AI 目前是人類研究人員的加速劑。它並沒有在做自主研究。這兩句話之間的差距,正是所有政策爭論真正所在之處,而 METR 的報告,連同其中的塗黑,是任何人發表過對這個差距最精確的描述。