日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
歩行arXiv:2609.27003

単眼ランウェイ動画からヒューマノイドの表現豊かな歩容を学習しロボットファッションショーへ

Learning Expressive Humanoid Locomotion from Monocular Runway Videos for Robot Fashion Shows

シェア:XThreadsFacebookLINEはてブBluesky

単眼のランウェイ動画から人間のモデル歩きを抽出し、ヒューマノイドロボットで再現する歩容ポリシーを学習・実機展開するフレームワークを提案した。

詳しい要約

1. どんなもの?

- 単眼のランウェイ動画から、人間らしい表現力豊かな歩行をヒューマノイドロボットで実現するエンドツーエンドフレームワーク。 - 動きの復元、ロボットへのリターゲティング、動作修正、ポリシー学習、シミュレーション評価、実機展開を含む。 - Booster K1 ヒューマノイドロボットでランウェイ風のキャットウォーク動作を評価。

2. 先行研究と比べてどこがすごい?

- 従来のヒューマノイドロボットは安定性と歩行速度を優先した歩行ポリシーに依存し、表現力豊かな人間らしいランウェイ動作の再現が困難だった。 - 本研究は単眼動画から直接展開可能なポリシーを生成し、狭い足配置や脚・胴・腕の協調動作を再現。 - ファッションショーなどパフォーマンス指向の応用可能性を示した。

3. 技術・手法の肝は?

- 単眼ランウェイ動画を入力とし、motion recovery、robot retargeting、motion correction、policy training、simulation-based evaluation、physical deployment のパイプラインで構成。 - 動画から抽出した動作をロボットに適応させ、修正を加えてポリシーを学習。 - シミュレーションで評価後、実機に展開。

4. どうやって有効だと検証した?

- Booster K1 ヒューマノイドロボットを用い、ランウェイ風キャットウォーク動作で評価。 - 学習したポリシーは全ての物理試行を転倒なく完了。 - 特徴的な狭い足配置と脚・胴・腕の協調動作を再現した。

5. 議論はある?

- 提案フレームワークが安定かつ表現力豊かなキャットウォーク動作を可能にし、ファッションショーや他のパフォーマンス指向シナリオへの可能性を示唆。 - 限界や課題については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として、humanoid locomotion の強化学習、motion retargeting、imitation learning に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kyrylo Kolesnichenko, Irvin Steve Cardenas, Jong-Hoon Kim

分類: cs.RO

原文アブストラクト

Runway walking requires coordinated control of posture, stride, foot placement, and whole-body motion to effectively present clothing and convey a distinctive style. However, humanoid robots used in fashion shows typically rely on locomotion policies optimized primarily for stability and walking speed, limiting their ability to reproduce expressive, human-like runway motions. In this work, we present an end-to-end framework that transforms monocular runway videos into deployable humanoid locomotion policies through motion recovery, robot retargeting, motion correction, policy training, simulation-based evaluation, and physical deployment. We evaluate the proposed framework on the Booster K1 humanoid robot using runway-style catwalk motions. The learned policy completed every physical trial without falling, while reproducing the characteristic narrow foot placement and coordinated movement of the legs, torso, and arms. The results demonstrate that our proposed training framework enables the Booster K1 to perform stable and expressive catwalk motions, highlighting its potential for humanoid robotic applications in fashion shows and other performance-oriented scenarios.

関連論文

PR本紙発行元 EmplifAI