Tianmin Shu
Johns Hopkins University
収録論文 22本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 観察・推論・協調：ゼロショット協調のためのロボットパートナーの制約推論協調マニピュレーション2026/10/1
ロボットが別のロボットの物理的制約を共同行動から推論し、新しいタスクでゼロショット協調を実現するベンチマークと手法を提案。
- JEPA-TTT: ダイナミクス変化下の計画のための潜在世界モデルの持続的テスト時訓練世界モデル2026/9/30
事前学習済みJEPA世界モデルの潜在ダイナミクス予測器をテスト時に自己教師あり学習で適応させ、環境のダイナミクス変化下でも計画性能を向上させる手法を提案。
- RF-HOI: 無線周波数信号による人と物体のインタラクション認識認識2026/8/1
プライバシーに配慮しつつ、ミリ波レーダーとRFIDを組み合わせたマルチモーダルRF信号のみで人と物体のインタラクションを認識するフレームワークを提案。シミュレータで合成データを生成し、少量の実データで微調整することで高い性能を達成した。
- 3D-Belief：生成的3D世界モデリングによる身体化された信念推論世界モデル/ナビゲーション2026/5/12
部分観測から3D空間でのエージェントの信念を推定・更新する生成的3D世界モデルを提案し、シミュレーションと実世界の物体ナビゲーションタスクで有効性を示した。
- 安全で解釈可能なマルチモーダル経路計画によるマルチエージェント協調マルチエージェント協調2026/2/1
VLMを用いて言語指示を経路編集プログラムに変換し、モデルベース計画で安全性を検証することで、ロボットが他者と協調しながら経路を適応させる手法CaPEを提案。
- PartInstruct: 部品レベル指示による細粒度ロボットマニピュレーションのためのベンチマークマニピュレーション2025/5/1
部品レベルの指示と3Dラベル付き物体を含む大規模データセットとベンチマークを構築し、既存のロボットマニピュレーション手法を評価した。
- GenEx: 探索可能な世界を生成する世界モデル2024/12/1
1枚のRGB画像から3D一貫性のある想像上の環境を生成し、AIエージェントがその中を探索・ナビゲートできるシステムを提案。
- 生成的ワールドエクスプローラーVLA2024/11/1
エージェントが大規模3D世界を心的に探索し、想像した観測で信念を更新して意思決定に活かすフレームワークを提案。
- 制約付き人間-AI協調：包摂的な身体性社会知能チャレンジ人間-AI協調2024/11/1
身体的制約を持つ人間を支援する身体性エージェントの社会知覚と協調計画を評価するベンチマークCHAICを提案し、LLMと行動モデリングを活用した手法を導入した。
- 逆生成モデリングによる少数ショットタスク学習少数ショット学習2024/11/1
事前学習した可逆生成モデルを使い、重み更新なしで数例から新しいタスク概念（目標や動作スタイル）を学習する手法を提案。物体再配置・ナビゲーション・動作キャプション・自動運転・実機卓上操作で検証。
- 心の理論を用いた人間とロボットの協調における実用的な音声指示追従VLA2024/9/1
雑音や発音の乱れがある音声指示でも、環境の文脈と心の理論に基づく推論でロボットが実用的に従えるニューロシンボリックモデルSIFToMを提案し、シミュレーションと実環境で有効性を示した。
- Language Models, Agent Models, and World Models: The LAW for Machine Reasoning and Planning2023/12/1
- Neural Amortized Inference for Nested Multi-agent Reasoning2023/8/1
- Building Cooperative Embodied Agents Modularly with Large Language Models2023/7/1
- Diagnosis, Feedback, Adaptation: A Human-in-the-Loop Framework for Test-Time Policy Adaptation2023/7/1
- NOPA: Neurally-guided Online Probabilistic Assistance for Building Socially Intelligent Home Assistants2023/1/1
- Discovering Generalizable Spatial Goal Representations via Graph-based Active Reward Learning2022/11/1
- Incorporating Rich Social Interactions Into MDPs2021/10/1
- Show Me What You Can Do: Capability Calibration on Reachable Workspace for Human-Robot Collaboration2021/3/1
- Joint Mind Modeling for Explanation Generation in Complex Human-Robot Collaborative Tasks2020/7/1
- Learning Social Affordance Grammar from Videos: Transferring Human Interactions to Human-Robot Interactions2017/3/1
- Learning Social Affordance for Human-Robot Interaction2016/4/1