Mingyi Shi
収録論文 4本 ・ フィジカルAI/ロボット学習
手の動き生成マルチモーダル相互作用モーション生成歩行
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 事前学習優先、条件付けは後:スケーラブルで制御可能な手の動き補完手の動き生成2026/7/1
全身動作と意味ラベルに適合する手の動きを生成するため、大規模な未ラベルデータから身体と手の運動学的先行知識を学習し、その後軽量な適応で意味制御を導入するフレームワークを提案した。
- InterAct: 日常場面における2人間の動的で表現豊かなインタラクティブ活動の大規模データセットマルチモーダル相互作用2025/9/1
2人が日常場面で協力して行う長時間のインタラクティブな活動を、音声・身体動作・表情のマルチモーダルで収録した大規模データセットを構築し、音声から両者の表情と身体動作を生成する拡散モデル手法も提案した。
- MOSPA: 空間オーディオに駆動される人間モーション生成モーション生成2025/7/1
空間オーディオに反応する人間の動きを生成するため、初の空間オーディオ駆動モーション(SAM)データセットを構築し、拡散モデルベースの生成フレームワークMOSPAを提案した。
- MotionPersona: 個人特性を反映した歩行制御歩行2025/6/1
身体的特徴や心理状態などの属性を指定すると、それを反映した歩行アニメーションをリアルタイム生成するキャラクターコントローラを提案。