日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

モーション生成arXiv:2611.13626

FlashMotion:超高速な長期3Dモーション生成

FlashMotion: Ultra-Fast Long-Term 3D Motion Generation

シェア:XThreadsFacebookLINEはてブBluesky

厳しい推論予算下で高品質な長期3Dモーショを生成するため、3Dモーション空間のMeanFlow定式化と軽量BiMambaアーキテクチャを組み合わせたフレームワークを提案。テキスト・音楽・音声からの生成タスクに対応。

詳しい要約

1. どんなもの?

- FlashMotionは、厳しい推論予算下で高品質な長期的3D human motion生成を行うためのco-designedフレームワーク。 - text-to-motion、music-to-dance、speech-to-gestureの3タスクを対象。 - ゲーム開発、XR、digital humans、embodied simulation等の実用パイプライン(rigging、retargeting、rendering)を想定。 - リアルタイム対話応用に向け、品質を犠牲にせずultra-fastなlong-term生成を目指す。

2. 先行研究と比べてどこがすごい?

- 従来は高品質3D motion生成に多数のsampling stepsを要する生成戦略と、長系列でのper-step計算・メモリコストが大きいモデル構造の2つのbottleneckが結合していた。 - FlashMotionはtrajectory-level効率とper-step効率の両方をco-designで改善。 - 要旨ではtext-to-motion、speech-to-gesture、music-to-danceの品質と効率の両面でoverall state-of-the-artを達成と主張。 - 具体的な比較対象の先行研究名は要旨からは不明。

3. 技術・手法の肝は?

- trajectory-level効率のため、3D motion-space MeanFlow定式化を導入し、kinematicおよびdynamic consistency制約付きでfew-step生成を実現。 - 時間的にcoherentなmotion editingのためAdaptive Soft masking機構を導入。 - per-step効率のため、軽量なnon-autoregressive BiMambaアーキテクチャを設計。 - condition-guided state selectionとAdaIN-based condition fusionにより、cross-modal alignmentと長いmotion系列への汎化を強化。

4. どうやって有効だと検証した?

- text-to-motion、speech-to-gesture、music-to-dance生成の広範な実験を実施。 - 品質と効率の両方でoverall state-of-the-art性能を達成したと報告。 - 具体的なデータセット名、評価指標、baseline、ablationの詳細は要旨からは不明。

5. 議論はある?

- 厳しいinference budget下での高品質long-horizon生成という設定の難しさを、sampling stepsとper-stepコストの2つのbottleneckとして整理。 - few-step生成と軽量architectureのco-designが有効である可能性を示す。 - 限界、失敗事例、計算資源の詳細、リアルタイム性の定量的評価、倫理的影響については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究名は不明。 - 関連手法としてMeanFlow、BiMamba、AdaIN、non-autoregressive生成、text-to-motion、music-to-dance、speech-to-gestureの各分野の代表的先行研究を次に読む候補として挙げる。 - 公開コード(FlashMotion)の実装と実験設定の確認も有用。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kaixing Yang, Xulong Tang, Ronghui Li, Xiangyue Zhang, Ziqiao Peng, Mingshuang Luo, Chenxi Zhao, Haoyu Wu, Ju Fan, Hongyan Liu, Puwei Wang, Zijiao Zeng, Jun He

分類: cs.CV

原文アブストラクト

3D human motion generation plays a crucial role in game development, extended reality (XR), digital humans, and embodied simulation. Beyond motion generation, practical pipelines include rigging, retargeting, and rendering, making ultra-fast long-term 3D motion generation without compromising quality valuable for real-time interactive applications. Despite promising progress, high-quality long-horizon motion generation under tight inference budgets remains challenging, owing to 2 coupled bottlenecks: (1) generative strategies that require many sampling steps for high-quality 3D motion generation and (2) model architectures with substantial per-step computational and memory costs for long sequences. We present FlashMotion, a co-designed framework for high-quality long-horizon 3D motion generation under a strict inference budget, covering text-to-motion, music-to-dance, and speech-to-gesture tasks. To enhance trajectory-level efficiency, we introduce a 3D motion-space MeanFlow formulation with kinematic and dynamic consistency constraints for few-step generation, together with an Adaptive Soft masking mechanism for temporally coherent motion editing. To improve per-step efficiency, we design a lightweight non-autoregressive BiMamba architecture with condition-guided state selection and AdaIN-based condition fusion mechanism, enhancing cross-modal alignment and generalization to longer motion sequences. Extensive experiments demonstrate that FlashMotion achieves overall state-of-the-art performance in both quality and efficiency across text-to-motion, speech-to-gesture, and music-to-dance generation. Code is available at FlashMotion (https://github.com/Sun-Happy-YKX/FlashMotion).

関連論文

  1. 1パナソニックHDら、ロボット操作AI「T-Rex」を共同開発 12タスクで平均成功率65%研究・技術
  2. 2Hugging Face、ロボット学習基盤「LeRobot v0.7.0」を公開 対話操作と大規模データ学習に対応新製品・発表
  3. 3NVIDIA、Vera CPUのエージェント処理性能を公表 x86比で速度・電力効率を比較半導体・GPU
  4. 4Agility、SPAC合併でナスダック上場資金調達
  5. 5AgiBot、基盤モデル「GO-3 Preview」を発表 身体性AIの3ベンチマークで首位新製品・発表
PR本紙発行元 EmplifAI