JA ▾
SNAPE REP RT トップページ →
確認済みAI安全性11月05日 12:49 UTC

研究者が13のフロンティアモデルの制御喪失リスクを採点、失敗率との相関はr = 0.84

Sören MindermannとYinpeng Dongらによるこのarxiv論文は、13の測定可能な側面と29のタスクを一つのスコアにまとめ、リスクは能力だけでは説明できずモデルごとに異なると述べ、的を絞ったファインチューニングと監視で失敗率が下がったと報告している。

arXiv で読む 共有

なぜ重要か

制御喪失をめぐる議論の多くは定性的ですが、この論文は事故が起きる前にそれを測定可能にしようとしています。リスクを不整合な動機、危害を可能にする能力、監視の回避の3要素に分け、29の評価タスクで13のフロンティアモデルを採点し、封じ込めた長期的リスクシナリオでの失敗率と照合しました(ピアソンr = 0.84)。著者らは、リスクはモデルごとに異なり能力だけでは説明できず、診断された弱点を狙ったファインチューニングと監視で失敗が減り、一般性能はほぼ維持されたと述べています。査読前のプレプリントです。他のモデル群での再現に注目です。

要点

  • 2026年11月5日にarXivへ投稿(2611.07953)
  • 3要素:不整合な動機、危害を可能にする能力、監視の回避
  • 13の測定可能な側面と29の評価タスクを一つのLoCスコアに集約
  • 13のフロンティアモデルで、スコアは封じ込めシナリオでの失敗率と相関(ピアソンr = 0.84)
  • リスクはモデルごとに異なり、能力だけでは説明できない
  • 的を絞ったファインチューニングと監視で、一般性能をほぼ保ったまま失敗率が低下

出典

AI安全性の関連記事
Snape Report のほかの記事トップページ →