PhysX-Omni：剛体、変形体、関節物体に対応した統合シミュレーション対応物理3D生成
PhysX-Omniは、剛体、変形体、関節物体を含む多様なカテゴリのシミュレーション対応物理3Dアセットを生成するための統合フレームワークです。ビジョン言語モデル向けに調整された新しい幾何学表現を導入し、高解像度の3D構造を圧縮なしで直接エンコードすることで、生成性能を大幅に向上させます。さらに、初の汎用シミュレーション対応3DデータセットであるPhysXVerseと、生成能力と理解能力の両方を評価する包括的なベンチマークPhysX-Benchを提案します。実験では、生成と理解の両方で優れた性能を示し、シミュレーション対応シーン生成やロボットポリシー学習への応用可能性が確認されました。具現化AIや物理シミュレーションの発展に貢献することが期待されます。
2026年5月20日、arXivに「PhysX-Omni：剛体、変形体、関節物体に対応した統合シミュレーション対応物理3D生成」と題する研究（論文番号：2605.21572）が公開されました。この研究はZiang Cao氏を含む8名の著者によるもので、既存の3D生成手法が物理特性を無視したり、剛体、変形体、関節物体といった単一のアセットカテゴリに限定されているという問題を解決することを目指しています。
PhysX-Omniは、多様なアセットタイプにわたってシミュレーション対応の物理3Dアセットを生成する統合フレームワークです。その核となるのは、ビジョン言語モデル（VLM）向けに設計された新しい幾何学表現で、高解像度の3D構造を圧縮せずに直接エンコードし、生成性能を大幅に向上させます。
大規模なトレーニングと評価を支えるため、研究チームは初の汎用シミュレーション対応3DデータセットPhysXVerseを構築しました。このデータセットは屋内および屋外の数百カテゴリをカバーしています。さらに、生成能力と理解能力を包括的かつ柔軟に評価するためのベンチマークPhysX-Benchを提案しました。PhysX-Benchは、幾何、絶対スケール、マテリアル、アフォーダンス、キネマティクス、機能記述の6つの主要属性を含み、モデルの物理的妥当性を多面的に評価します。
広範な実験により、PhysX-Omniは従来の指標とPhysX-Benchの両方で優れた性能を示し、生成と理解の両面で既存手法を上回りました。さらに、シミュレーション対応シーン生成やロボットポリシー学習への応用可能性も確認されており、具現化AIや物理シミュレーションの幅広い下流タスクに大きな進展をもたらすと期待されています。特に、ロボット工学、ゲーム、映像制作などの分野でのシミュレーション応用に強力な技術基盤を提供するでしょう。