本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

直感と証拠:マルチモーダルエージェントのための適応的二重記憶

記事の要約

本論文は、モデル固有の潜在記憶を直感的事前分布として、複数インデックスを持つエピソード記憶と統合する二重記憶フレームワークを提案する。検索条件付きの共同アラインメントで証拠を正確に再構成し、推論時にはJSD感度と信頼度プロキシに基づく学習不要のルーティングで両記憶を適応的に組み合わせる。

ソースarXiv Computer Vision著者: Qiuhe Hong, Jingya Wang, Cuzhen Geng, Shenyao Peng, Munan Ning, Yuyang Liu, Yonghong Tian
直感と証拠:マルチモーダルエージェントのための適応的二重記憶
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

マルチモーダルエージェントが持続的な対話を行うとき、長期記憶は二つの異なるが相補的な役割を担う。一つは細粒度の証拠を正確に想起することであり、もう一つは経験を内面化して全体的な理解を得ることである。論文は、既存のエピソード記憶と潜在記憶がそれぞれ明示的な履歴記録と内面化された経験によってこれらの要求に応えてきたと指摘する。しかし、エピソード記憶は証拠の被覆範囲と統合に限界を抱え、潜在記憶は事実への接地が不十分であるため、どちらか一方のパラダイムだけではタスクごとに異なる記憶への親和性に対応できない。

この隔たりを埋めるため、著者らは二重記憶フレームワークを提案する。モデル固有の潜在記憶を直感的な事前分布として位置づけ、複数のインデックスを持つエピソード記憶と統合し、検索条件付きの共同アラインメントによって正確な証拠再構成を実現する。つまり、全体を「直感」で捉える能力と、追跡・検証可能な原証拠の連鎖の両方を保持する設計である。

推論段階では、追加学習に頼らず、クエリごとの記憶親和性に応じて二種類の記憶を適応的に組み合わせる学習不要のルーティング機構を採用する。ルーティングの信号にはJensen-Shannon divergence(JSD)感度と信頼度プロキシを用い、その問いが内面化された直感的知識に適するのか、それとも具体的な証拠検索を必要とするのかを判断する。

著者らはマルチモーダルベンチマークで広範な評価を行い、フレームワークが全体として最先端性能を達成し、標準的なエピソード記憶ベースラインを約4.67%上回ることを示した。さらなる分析では、証拠の位置特定が必要なタスクではエピソード記憶が強みを発揮し、分散した情報の統合や不完全な検索の補償では潜在記憶が重要な役割を果たすことが明らかになった。本論文は2026年10月8日に投稿され、第一著者はQiuhe Hongで他に6名の共著者がいる。分野はコンピュータビジョンとパターン認識(cs.CV)、arXiv番号は2610.33019である。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • 潜在記憶とマルチインデックスのエピソード記憶を統合し、単一パラダイムの証拠被覆と事実接地の限界を補う
  • Jensen-Shannon divergence感度と信頼度プロキシによる学習不要のルーティングで、クエリに応じて記憶を適応的に選択
  • マルチモーダルベンチマークで最先端性能を達成し、従来のエピソード記憶ベースラインを4.67%上回る

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。