AI小説は「愚かで質が低い」ため検出が容易、研究で判明

近年、人工知能が生成する小説の数が急増しているが、その品質には疑問が多い。メリーランド大学とGoogle DeepMindによる最新のプレプリント研究は、AI生成小説が物語の特徴において明確な欠陥を持ち、容易に検出可能であることを実証した。研究チームは5万以上のAI生成短編小説を分析し、テーマの過剰説明、サブプロットの欠如、ぎこちない道徳化といった問題が共通していることを発見した。

研究チームはStoryScopeという検出ツールを開発した。従来の方法がダッシュや「delve」といった語彙マーカーに依存していたのに対し、StoryScopeはプロットの展開、キャラクターの描写、設定、時間構造といった物語の構造要素に焦点を当てる。人間の作品と比較することで、このシステムはAI生成テキストを高い精度で識別できる。

研究では、異なるAIモデルに固有の「文体」も明らかになった。GPTは夢のシーンを多用し、Geminiは外部描写を優先し、Claudeはイベントの展開が平坦である。AIの会話では59%が哲学的議論に使われるのに対し、人間の作品では34%にとどまる。また、AIストーリーは時間の飛躍やフラッシュバックをほとんど使わず、登場人物や場所の数も人間の作品よりはるかに少ない。

ただし、この研究で使用されたBooks3データセットは著作権問題で物議を醸している。このデータセットは18万3000冊の海賊版電子書籍を含み、複数の訴訟の対象となっている。研究者らは著作権問題を認識しており、データセットは学術目的のみに使用され、一般公開はされていない。注目すべき点として、研究チームは論文作成にもAIを活用しており、Claude CodeやCodexなどのコーディングエージェントを使用したことを開示している。これは学術的誠実さを促進するための意図的な取り組みである。

研究著者の一人Jenna Russell氏は、この研究の意義は単なるテキスト検出を超え、「物語の特徴」の違いを特定することにあると述べている。AIの物語上の固有の欠陥を理解することで、教師や読者が作品背後にある創造性が真に人間によるものかどうかを判断する助けになると考えている。