AI生成の低品質な貢献により初回貢献者のマージ率が18.18%低下:294リポジトリの分析
新たな研究により、AI生成の低品質な貢献(AI-DDoSと呼ばれる)がオープンソースコミュニティに与える圧力が明らかになった。294のリポジトリにおける200万件以上のプルリクエストと課題を分析した結果、2025年にPR数は増加したがマージ率は低下し、初回貢献者のマージ率は反事実と比較して18.18%低下した。研究では11の改善戦略も示されている。
2026年7月4日、arXivに投稿されたプレプリント「AI Slop is DDoSing Open Source」は、生成AI(GenAI)ツールがオープンソースソフトウェア(OSS)コミュニティに与える影響を分析した。Sadia Afrozら6人の著者によるこの研究では、AIが生成した一見もっともらしいが低品質な貢献がOSSのレビュー能力を圧倒する「AI-DDoS」現象を定義している。
研究は現象ベースの混合手法アプローチを採用。まず、Reddit、OSSメンターメーリングリスト、ブログからの実務者の報告を分析し、6つの反復テーマを特定して仮説を導いた。次に、ベイズ構造時系列分析を用いて294のリポジトリにおける200万件以上のプルリクエストと問題を評価した。その結果、2025年にはPR数が増加した一方でマージ率は低下し、初回貢献者のPRマージ率は反事実と比較して18.18%低下したことが明らかになった。これは、AIによる低品質な貢献がコミュニティの新規メンバー統合能力を損なっていることを示している。
さらに、AI-DDoSは単なる貢献量の問題ではなく、「持続可能性の罠」であると指摘する。コミュニティはしばしば、受け入れ基準の引き上げや自動フィルタリングなどの低コストな防御戦略に頼るが、これらは短期的にはレビュー能力を保護するものの、長期的な開放性を維持することを困難にする。研究者らは実務者インタビューを通じて11の改善戦略を特定し、229人のOSS実務者を対象とした調査で検証。戦略は保存的(例:基準の厳格化)、適応的(例:自動化ツールの導入)、変革的(例:貢献プロセスの再設計)の3つに分類された。研究は、OSSコミュニティがレビューの質と開放性のバランスを取り、過度な防御による活力喪失を避ける必要性を強調している。AIがオープンソース生態系に与える影響を理解する上で重要な知見を提供するこの研究は、コミュニティが積極的な対策を講じるよう促している。