本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

ステレオビジョンを用いた人体姿勢推定による転倒予測と検出:AMD Kria K26 SOM上での実装

記事の要約

本論文では、AMD Kria K26 SOM上で動作する低消費電力・携帯可能なビジョンベース転倒予測・検出システムを提案する。Intel RealSense D455カメラと3段階パイプライン(量子化YOLOX、A2J、CNN)を用い、エッジデバイス上でリアルタイムかつプライバシー保護された転倒検出を実現。マルチスレッド最適化によりフレームレートは4.5 FPS、分類精度は75.85%を達成した。

ソースarXiv Computer Vision著者: Shreyas Narasimhiah Ramesh, P. D. Rathika, Mahasweta Sarkar, Kristen Wells, Michel Audette, Christopher Paolini
ステレオビジョンを用いた人体姿勢推定による転倒予測と検出:AMD Kria K26 SOM上での実装
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

新しい研究により、ステレオビジョンと人体姿勢推定(HPE)に基づく転倒予測・検出システムが提案された。このシステムはAMD Kria K26システムオンモジュール(SOM)上で動作し、高齢者向けの非侵襲的かつプライバシー保護されたリアルタイムモニタリングを目的としている。本成果はShreyas Narasimhiah Rameshらによるもので、arXivプレプリント(ID: 2606.12473)として公開された。

ハードウェアにはIntel RealSense D455深度カメラを使用し、USB経由でK26 SOMに接続する。RGB画像と深度画像(解像度640×480、フレームレート60 FPS)を同期して取得する。ソフトウェアは3段階のパイプラインで構成される。まず、量子化されたYOLOXモデルがRGBフレームから人物のバウンディングボックスを検出し、その後すぐにRGBフレームを破棄してプライバシーを保護する。次に、Anchor-to-Joint(A2J)モデルが深度フレームを用いて各人物の15関節点を推定する。最後に、CNNが選択された関節座標(x, y, z)に基づいて転倒行動を分類する。

モデル学習に関して、YOLOXはCrowdHumanデータセット、A2JはITOP、MP-3DHP、UR Fall Detection、および自作のSDSU PSGデータセット、CNNはUR Fall DetectionとSDSU PSGを使用した。シングルコアDPUによるシリアルパイプラインと、デュアルコアDPUによるマルチスレッドパイプラインの性能比較が行われた。シングルスレッド版のフレームレートは2.5 FPSだったが、マルチスレッド最適化により4.5 FPSに向上した。精度評価では、YOLOX(IoU≧50%)が74%、A2J(10cm閾値のmAP)が84.13%、CNNの分類精度が75.85%となった。

本研究は、AMD Kria K26のようなエッジデバイス上でプライバシーを保護しながら転倒検出が可能であることを実証した。システムは完全にローカルで動作し、クラウドに依存しないため、在宅高齢者モニタリングや介護支援に適している。今後の課題として、モデルの精度と速度の向上が挙げられている。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • AMD Kria K26エッジデバイス上でプライバシー保護型転倒検出システムを実装
  • 3段階パイプライン:YOLOXによる人物検出、A2Jによる関節推定、CNNによる転倒分類
  • マルチスレッド化によりスループットを2.5 FPSから4.5 FPSに向上
  • UR Fall Detectionとカスタムデータセットで分類精度75.85%を達成

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。