AIモデルはスウェーデンでどの政党に投票するか

スウェーデンの日刊紙『Svenska Dagbladet』は先ごろ、主要なAIチャットボットをSVTの選挙指南（Valkompass）にかけ、ChatGPT、Gemini、Claude、Grokがどの政党を選んだかを報じた。しかし、このテストはチャット製品の性能を示すものであり、モデルそのものの性質を測るものではない。これらのアプリにはシステムプロンプト、安全レイヤー、そして多くの場合ライブのウェブ検索機能が備わっており、結果は製品とその検索スタックに依存する。

そこで我々は、より純粋な問い——ツールやウェブ、システムプロンプトを取り除いた場合、モデル単体ではどの方向に傾くのか——を探ることにした。Agent Arenaのリーダーボードから28の構成（Anthropic、OpenAI、Google、xAI、DeepSeek、Moonshot、Z.ai、MiniMax、Alibaba、NVIDIAの23の先端モデルを含む）を選び、SVTの選挙指南35問を回答させた。すべての呼び出しはOpenRouter APIを通じて行われ、チャットアプリ、ウェブ検索、ツール、システムプロンプトは一切使用せず、ウェイトのみを用いた。

各構成の35の回答を各政党の公式回答と比較し、最も近い政党を特定した。結果は、7つの構成が左翼党（Vänsterpartiet）、6つが緑党（Miljöpartiet）、5つが穏健党（Moderaterna）、4つずつが自由党（Liberalerna）と社会民主党（Socialdemokraterna）、2つが中央党（Centerpartiet）に最も近いものとなった。キリスト教民主党（Kristdemokraterna）やスウェーデン民主党（Sverigedemokraterna）に最も近い構成は一つもなかった。

平均同意率を見ると、主要6政党間の差はわずか2ポイント（67～69％）で、モデルは政治的中道に集中している。明確な外れ値はスウェーデン民主党で49％、キリスト教民主党で57％だった。スウェーデン民主党は28構成中26で最下位となり、モデルが最も同意しない政党であることが明確に示された。

推論設定の影響は予想以上に大きかった。同じモデルでも思考モードのオン/オフで答えが大きく変わり、Kimi K2.6では35問中23問の回答が変化した。これこそが、リーダーボードが思考モードを独立した構成として扱う理由である。

なお、本実験はチャット製品ではなく、API経由で呼び出される生のモデルを対象としている。現在、モデルのトークン生成の大部分はAPIを通じて行われ、エージェントやパイプラインによって使用されている。生のモデルは、製品にラップされていない状態が世界で最も広く利用されているバージョンである。したがって、これらの結果はモデル自体の政治的傾向を示すものであり、市場に出回っている製品の振る舞いとは必ずしも一致しない。