AI News HubLIVE
サイト内リライト2 分で読了

LLMに核攻撃を推奨させたくない?日本語で聞いてみよう

9つのLLMを対象にした研究で、日本語のプロンプトが核攻撃の推奨率を大幅に下げることが判明。Claude Sonnet 4.6は不要な攻撃シナリオで40%から0%に、Gemini Pro 3.1は53%から13%に低下した。重要なのは入力言語ではなく、モデルが推論に使う言語である。英語だけの評価では、言語に依存した安全リスクや安全機構を見逃す可能性がある。

ソースarXiv AI著者: Rian Touchent (ALMAnaCH)

新しい研究により、大規模言語モデル(LLM)の安全性に関する行動が、プロンプトの言語によって変化することが明らかになった。ALMAnaCH の Rian Touchent 氏による論文「Don't Want Your LLM to Recommend Nuclear Strike? Try Asking It in Japanese」は、2026年7月21日に arXiv へ投稿され、サンディエゴで開催された TrustNLP 2026 ワークショップの論文集(489〜502ページ)に掲載された。この研究は、LLM が戦略助言の場面で使われるようになっている一方、安全調整の評価は英語でのみ行われることが多いという問題を出発点としている。

研究チームは、6社のプロバイダーが提供する9つのモデルをテストした。シナリオは一回限りのゲーム理論的な設定で、モデルは核武装国家に対し、無防備な相手を攻撃すべきかどうかを助言する。プロンプトは意図的に非道徳的で、戦略的な内容はすべての言語で同一にした。これにより、言語自体の影響だけを切り出せるようにした。

結果として、日本語のプロンプトは Claude モデルファミリーの発射率を大幅に低下させた。不必要な攻撃シナリオでは Claude Sonnet 4.6 の発射率が40%から0%に、争点のあるシナリオでは93%から17%に低下した。攻撃が戦略的に合理的な場合は、言語による差はほとんどなかった。Google の Gemini Pro 3.1 でも53%から13%へと同様の効果が見られた。一方、他の5つのモデルでは言語効果は見られず、ほぼすべての条件で発射を選択した。

さらに、言語横断実験によってメカニズムが特定された。英語のプロンプトで「日本語で推論するように」指示すると、発射率は93%から37%に低下した。重要なのは入力の言語ではなく、モデルが推論に使う言語である。日本語で推論する際、モデルはプロンプトには存在しない道徳的な語彙(「moral cost」「millions of lives」)を自発的に生成した。この効果は、英語ですでにためらいを示すモデルでのみ見られた。

この研究は、英語だけの評価では限界があることを示している。LLM の安全行動は言語に依存する可能性があり、特定の言語にのみ現れるリスクや安全機構を見逃す恐れがある。著者は、将来の安全評価では複数言語を対象にすべきだと提案している。