近年、大規模で複雑な再構成シーンの新規視点レンダリングはますますフォトリアリスティックになっていますが、ほとんどの再構成は静的であり、環境を没入感のあるものにする微妙な動きが欠けています。AniGSは、3Dガウススプラッティング(3DGS)再構成のシーンレベルアニメーション手法であり、植生の動きのような分散した動的効果を追加しつつ、剛体構造を保持します。既存の3Dアニメーション技術がオブジェクト中心または小領域に限定されているのに対し、AniGSは大規模で雑然としたナビゲーション可能なシーン向けに設計されています。
AniGSはシーンを標準的な3DGSで表現し、時間条件付き変形場を使用して動きをモデル化します。シーン全体をアニメーション化するために、事前訓練されたビデオ拡散モデルを活用し、反復的なデータセット・モデル更新戦略を導入します。この戦略は視点カバレッジを段階的に拡大し、レンダリングとリファインメントのサイクルを通じてカメラ固定の訓練ビデオを繰り返し更新します。さらに、静的領域での意図しない動きによるアーティファクトを防ぐため、合成ビデオ間リファインメント方式を導入し、動きを目的領域に制限します。
5つの実世界の大規模屋外シーンでの実験により、AniGSが自然な環境動態と高品質な新規視点映像を生成し、再構築された環境の没入型視聴体験を向上させることが実証されました。既存手法との比較においても、AniGSは動きの自然さ、視覚品質、視点一貫性の面で優れた結果を示しています。本手法は、仮想現実、ゲーム、映画制作など、高度な没入感と動的な環境が求められる分野での応用が期待されます。著者らはプロジェクトページを公開しており、今後はより複雑な動きやリアルタイムアプリケーションへの拡張を計画しています。