本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

FusionSense:実行時適応型マルチモーダルエッジインテリジェンスのための3段階近センサー学習

記事の要約

FusionSenseは、3段階のトレーニング手順を通じてエッジでの実行時意思決定を可能にする融合認識型近センサーセンシングフレームワークを提案し、計算と通信を同時に削減して、デュアルモダリティのドローンデータセットで最大33倍のエネルギー削減を達成します。

ソースarXiv Machine Learning著者: Sanggeon Yun, Ryozo Masukawa, Minhyoung Na, Hyunwoo Oh, Yoshiki Yamaguchi, Wenjun Huang, SungHeon Jeong, Mohsen Imani
FusionSense:実行時適応型マルチモーダルエッジインテリジェンスのための3段階近センサー学習
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

自律システムやスマートインダストリーの展開では、計算を近センサー、エッジ、クラウドのリソースに分散させる動きが進んでおり、厳しいエネルギー、遅延、信頼性の予算のもとで実行時適応性が求められています。実際には、各ポイントで何を計算し何を送信するかを決めることが極めて重要です。しかし、カメラやLiDAR/深度センサーなどのマルチモーダルセンサースイートがエッジで急増する中で、従来のアプローチのほとんどは、(i) 強力なサーバー上でモダリティを融合するか、(ii) クロスモーダル依存関係を無視した単一モーダルの近センサーフィルターを適用するかのいずれかであり、冗長な送信やイベントの見逃しにつながっていました。

この問題に対処するため、Sanggeon Yun氏ら8名の著者はFusionSenseを提案しています。これはエネルギー制約のある自律エッジシステム向けの融合認識型インテリジェントセンシングフレームワークです。中核となるのは軽量な近センサー分類器で、そのトレーニングは3つのステップで構成されます。まず、サーバー側の融合モデルが下流タスクを学習します。次に、フィルターアウトセーフ(FoS)ラベルが、融合決定に対する各モダリティの必要性を定量化します。最後に、近センサー予測を補助信号として注入することにより、エッジ側の融合モデルが圧縮されます。その結果、計算と通信を同時に削減する実行時意思決定層が実現し、センサー数に比例して線形にスケールします。

SynDroneデータセット上のデュアルモダリティ(RGB+深度/LiDAR)設定では、FusionSenseは単一モーダルフィルターよりも大幅に高いデータ削減率でタスク品質を維持します。エンドツーエンドの性能向上は顕著で、FoI普及率1%で最大33倍のエネルギー削減、10%で11倍の削減、固定30%のデータ削減率で品質損失を92.3%削減、最高の従来フィルタリングベースラインと比較して約1.5倍のエネルギー節約を実現します。この研究はISLPED 2026に採択されています。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • 3段階のトレーニング:サーバー側融合学習、フィルターアウトセーフラベル、エッジ側融合モデルの圧縮。
  • 実行時意思決定層はセンサー数に応じて線形にスケールし、計算と通信を共同で最適化。
  • SynDroneでは、FoI普及率1%で最大33倍、10%で11倍のエネルギー削減。
  • 固定30%のデータ削減率で品質損失を92.3%削減し、最高のベースラインと比較して約1.5倍のエネルギー節約。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。