本番RAGシステムが徐々に劣化する理由

本番RAGシステムは単一の致命的なイベントで故障することはほとんどなく、一連の運用変更により信頼性が徐々に低下します。本稿では、3つの次元に基づく信頼性フレームワークを提案します：障害ダイナミクス（時間経過による信頼性の変化）、信頼性制御面（エンジニアが観察・介入できる場所）、検出可能性（ユーザーに影響が出る前に障害が発見される容易さ）。7週間のドキュメント進化をシミュレートした制御実験により、段階的な知識ドリフトが従来の監視をどのように逃れるかを示します。