METR、Anthropicのモデル能力がAI支援で約2倍の速さで向上と評価

高アクセス独立評価:AECIは2025年10月以降約1.9倍の成長。現在の加速の大半はAIによる研究開発支援と推定、大幅な墨消しあり。
なぜ重要か
METRはAnthropicで11週間、内部ベンチマーク・計算量・職員インタビューを検証。よく定義されたタスクの能力は2024年3月–2025年10月期の約2倍速で伸び、現在の加速の約80%はAI支援によると推定。一方で訓練の最重要部分への完全自律の高影響寄与はまだない。重要な根拠の大半はAnthropicが墨消し。AECIが2倍超の加速を持続するかが次の焦点。
要点
- AECIは2025年10月以降約1.9倍成長(95%CI 1.5–2.8)
- 現在の加速の大半(約80%推定)はAIによる研究開発支援
- 学習計算量スケールの加速が原因ではない
- 2026年8月12日–10月29日の11週間高アクセス評価
- 最も有益な証拠の大半をAnthropicが墨消し
- 訓練の高影響な完全自律寄与は未確認