JA ▾
SNAPE REP RT トップページ →
続報AI安全性11月09日 21:45 UTC

OpenAI、研究用モデルの出力を35秒以内に止められる「Control Room」を導入

Cover image for Unite.AI's report on OpenAI's Control Room system
Unite.AI

OpenAIによると、同システムは研究インフラ全体ですでに稼働し、自身が停止した場合も出力を止める。35秒という数字は同社の発表で、独立した検証はまだない。

Unite.AI で読む 共有

なぜ重要か

Control Roomは、監視が問題を検知したときに研究所がどれだけ速くモデルを止められるかという実務的な安全上の問いへのOpenAIの答えだ。Unite.AIによると、今年初めには警報後に内部モデルを手動で停止するのに2.5時間かかっており、35秒での停止は数字の上では大きな変化となる。対象は学習や評価などの研究用ワークロードで、一般向けのChatGPTやAPIは含まれず、OpenAIはそちらはすでに集中的に停止できるとしている。停止時間の外部監査や、他の研究所が同様の仕組みを公表するかが焦点だ。

要点

  • 停止判断から35秒以内に出力を停止
  • OpenAIの研究インフラ全体ですでに稼働
  • Control Room自体が停止すると推論を拒否
  • 学習・評価・データ処理のワークロードが対象
  • 今年初めの手動停止は2.5時間(Unite.AI)

出典

AI安全性の関連記事
Snape Report のほかの記事トップページ →