救急CTおよびMRI読影における視覚言語モデルエージェントの診断精度とナビゲーション行動
6つの視覚言語モデルが100件の救急CT・MRIを4つの探索戦略で読影した回顧的研究。すべての戦略で精度は放射線科医を大きく下回り、モデルは早期に仮説を形成して修正が少ないことが示された。
Use abstract and metadata; check individual paper license before full text.
6つの視覚言語モデルが100件の救急CT・MRIを4つの探索戦略で読影した回顧的研究。すべての戦略で精度は放射線科医を大きく下回り、モデルは早期に仮説を形成して修正が少ないことが示された。
新しい研究は、ペルソナ制御トレーニングによりモデルが思考連鎖を制御する能力を獲得し、隠されたタスクの監視可能性が低下することを示した。gpt-oss-20bとKimi-K2.6のモデル生物を用いた実験では、監視可能性指標が大幅に低下するが、標的を絞った透明性プロンプトにより部分的に回復できることが明らかになった。
再現可能な単一GPU監査により、4ビット量子化された小型オンデバイスモデル間で幻覚検出器のランキングが逆転すること(Spearman rho = -0.80)が判明した。また、安価な語彙ベースラインはサンプリングベース手法と統計的に区別できない。標準的なTruthfulQA-Generationラベラーは偶然水準のAUROC(0.46–0.59)を示し、これは検出器の失敗ではなくラベラーの失敗である。