METR、AnthropicのAI開発加速を評価　内部指標の伸びは推定1.9倍、因果には留保

何について

METRは11月5日、8月12日〜10月29日にAnthropicの内部情報を用いて行ったAI研究開発の評価を公表した。内部モデルを含む能力指標AECIの伸びは、2025年10月以前と比べて推定1.9倍に加速したと報告し、95%信頼区間を1.5〜2.8倍としている。これは能力そのものが1.9倍という意味ではなく、以前の約2年分の指標上の進歩が約1年で起きたという比較だ。 METRは、明確に定義された課題での進歩が約2倍となり、その加速の大部分にAI利用が寄与している可能性が高いと判断する一方、因果の切り分けには大きな不確実性があると明記した。研究者への聞き取りや自己申告は補助的証拠で、研究開発の全面自動化を確認したわけではない。実務の複雑な課題への一般化、指標への適合、AI以外の要因にも留保がある。 報告では、重要な根拠の多くが機密情報として非公開になり、読者が独自に再評価できる範囲に限界があるとも説明している。今回の評価は、10月15日に別途発表された社員に近いアクセスを与える評価とは異なる。AIが次世代AIの開発をどこまで速めるかを検討する資料であり、将来の加速や制御喪失を確定したものではない。

なぜ注目

AIがAI開発を加速する循環について、企業内部の指標と聞き取りを用いた評価が公表された。観測された伸び、AIへの因果帰属、公開できない証拠の制約を分けて読む必要がある。