KPMGのAIに関する報告書、AIの幻覚で溢れかえる

大手会計事務所KPMGが2025年10月に発表した「エージェント型AI」に関する報告書に深刻な問題があることが、AI検出企業GPTZeroの調査で明らかになった。報告書『Total Experience: Redefining Excellence in the Age of Agentic AI』は、KPMGの年次グローバル顧客体験調査を要約したものだ。しかし、GPTZeroの分析によれば、45の引用のうち40が架空のものであり、実際には存在しないソースを参照していた。GPTZeroはこの現象を「バイブ引用」と呼び、生成AIが誤った参考文献を作成したり、実際のソースを混同したり、タイトルを大幅に言い換える傾向を指摘している。

さらに、これらの引用に基づく事実主張の約半数が誤っているか、誤った帰属をしていることが判明した。例えば、報告書は2019年の東日本旅客鉄道のプレスリリースをAIエージェント利用の証拠として引用しているが、「エージェント型AI」という概念が公に議論されるようになったのは2024年以降である。また、KPMGの大規模言語モデルは、記事の主題を著者と誤認する傾向があり、サリー在住のブロガーがロンドン交通局について書いたブログをTfLの著作とし、ユニクロについての小売ニュースをユニクロが書いたと引用していた。

報告書内のデータも矛盾している。KPMGの「研究」としてCEOの55%がAIを最優先投資対象としていると引用しているが、同じ月に発表された『KPMG 2025 CEO見通し』ではその数字が71%となっている。GPTZeroの調査では、この報告書の誤った統計や主張が業界誌やチェコの新聞に転載され、ChatGPTやGeminiなどのLLMに直接引用されていることも明らかになった。

KPMGはこの報告書を自社のホームページから削除した。報告書の著者ポール・エソーは調査結果の中で、「KPMG内の誰も、Total Experienceが公開される前に引用文や主張、ソースをダブルチェックしなかったと推測される」と述べている。KPMGインターナショナルのスポークスパーソンは、「KPMGインターナショナルは公開コンテンツの正確性と完全性を真剣に受け止めている。報告書は削除され、公開状況をレビューしている。すべての従業員がAIの責任ある使用に関するガイドラインに従い、コンテンツの検証と独立したソースの確認のために人間による監視を行うことを期待している」とコメントした。

この問題は専門サービス業界全体に広がっている。2024年10月には、デロイトがAI使用による複数の誤りを含む報告書を提出した後、オーストラリア連邦政府に部分的な返金を行った。ロンドン拠点の法律事務所ピンセント・メイソンズは、弁護士が虚偽の法的情報を含むAI生成書簡を提出したことで高等法院判事から批判された。今年4月には、米国の名門法律事務所サリバン・アンド・クロムウェルが、AIによる「幻覚」を含む書類を有名事件で提出した後、裁判官に謝罪した。5月には、EYがロイヤルティプログラムに関する調査にAIの幻覚と偽の脚注が含まれているとして撤回している。

GPTZeroのCEO兼共同創業者エドワード・ティアンは、「我々の最新調査は問題の規模を示している。今日はKPMG、先月はEYであり、短期的には問題が悪化する一方だと予想される。両報告書は我々の調査後に撤回された」と述べている。