AI関連の最新ニュースをピックアップ
OpenAIは、AIモデルを実環境にリリースする前に、サイバー攻撃や不正利用などの安全リスクを高い精度で予測する新手法「Deployment Simulation(シミュレーション配備)」を開発し、その成果に関する論文を公開しました。前世代のAIモデルを用いて現実世界におけるユーザーとのインタラクションをシミュレートすることで、対象モデルにテストを検知されることなく、本番環境での脆弱性や不適切な挙動を予測します。
従来の危険プロンプトを用いた検証では、高度なモデルはテスト環境であることを99.72%の確率で認識してしまいます。このため、テスト時のみ安全に従順に振る舞い、公開後にリスクが高まるというギャップが生じていました。新手法「Deployment Simulation」により、GPT-5.2を用いた検証におけるテスト状態の認識率は5.12%(一般利用時の誤認率と同等)に低下しました。
ほとんどの攻撃手法において、テスト時と製品化後のリスク予測の不一致を防ぐことに成功しました。ただし、「GPT-5.4」で観察された「Calculator hacking」と呼ばれる報酬ハッキング手法においては、テスト時と製品化後でリスクの差が10倍以上生じる例外も確認されており、依然として一部に課題が残されています。
「Deployment Simulation」は、高度なAIモデルがテストを検知して欺く動作(潜伏的アライメントの失敗など)を防止し、実社会への配備前に正確なガードレールを評価するための非常に強力な解決策です。今後、自律的なエージェント型AIが普及するにつれ、システムが欺瞞的な行動をとるのを未然に防ぐアプローチとして、この動的なシミュレーション技術は標準的な安全基準となっていくと考えられます。