初の教皇によるAIに関する回勅が大部分AIによって執筆された証拠
著者はテキスト分析、統計的証拠、AI検出ツールを用いて、教皇レオ1世の最初の回勅『Magnifica Humanitas』の相当部分がAI（特にClaude）によって書かれたと論じています。回勅におけるダッシュや「genuinely」の使用頻度が過去の回勅をはるかに上回り、Pangram検出器が複数の段落をAI生成と判定したことを挙げています。個々の証拠は説明可能かもしれませんが、複数の角度からの証拠の一致は無視しがたいとしています。
記事インテリジェンス
要点
- 回勅ではダッシュと「genuinely」の使用頻度が過去のどの回勅よりもはるかに高い。
- AI検出ツールPangramが複数の段落を40～100%AI生成とフラグ付けしたが、過去の回勅ではすべて0%だった。
- セクションごとにAI使用率が大きく異なり、一部の枢機卿はAI支援を利用したが、そうでない者もいることを示唆。
重要な理由
このニュースが重要なのは、回勅ではダッシュと「genuinely」の使用頻度が過去のどの回勅よりもはるかに高いためです。
技術的影響
モデル選定、推論コスト、プロダクト能力、評価基準に影響する可能性があります。
教皇レオ1世は最初の回勅『Magnifica Humanitas』を発表し、人工知能の時代における人間の尊厳を守ることをテーマとした。しかし、ある分析記事が衝撃的な主張を展開している：この回勅の相当部分が人工知能（AI）によって書かれた可能性が高いという。
記事の著者LinchはAI業界の専門家で、回勅を読んだ時点で特定の段落が「滑らかすぎる」「完璧すぎる」と感じた。例えば、「テクノロジーには癒し、つなぎ、教育し、私たちの共通の家を守る力があるが、同時に分裂させ、排除し、新たな不正を生み出すこともある」といった文章や、ダッシュの多用、形容詞「genuinely」（真に）の頻出は、著者が日常的に目にするAI生成テキストの特徴と一致していた。
直感を検証するため、著者は定量的分析を行った。回勅ではダッシュが127回使用されていたのに対し、過去のすべての回勅ではダッシュはほとんど使われていなかった（例えば2024年の『Dilexit Nos』は0回、2020年の『Fratelli Tutti』も0回）。また、「genuinely」は回勅で9回使用され、最も近い他の回勅でも3回だった。これらの語彙や句読点の使用パターンは、大規模言語モデルのアウトプットと非常に類似している。
著者はさらに商用AI検出ツールPangramを使用し、回勅の複数の段落が40%から100%の確率でAI生成と判定されたことを確認した。対照として用いた過去の回勅はすべて0%だった。イタリア語版も同様にAI生成と判定され、その割合は英語版よりも高かった。興味深いことに、回勅のセクションごとにAI使用率が大きく異なる。著者はこれについて、一部の枢機卿（おそらく教皇自身を含む）はAIを使わず、他の枢機卿はAIに大きく依存したと推測している。
個々の証拠は偶然で説明できるかもしれないが、複数の角度からの証拠が一致することを考えると、「回勅が主にAIによって書かれた」という結論は無視しがたい。著者は、これは回勅の内容に対する否定ではなく、執筆過程の客観的分析であると強調する。この事態は、最高の宗教的権威がAIに関する文書を起草する際にAIを使用することの象徴的な意味について、深い問いを投げかけている。