Randy Gomez
収録論文 10本 ・ フィジカルAI/ロボット学習
マルチモーダル対話予測対話システムジェスチャ生成教育ロボット/HRIHRI感情認識
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 社会的ロボット仲介のためのマルチモーダル音声活動予測：期待される行動と展開制約マルチモーダル対話予測2026/9/23
音声と視覚の同期情報から会話のターンテイキングを予測し、ロボットが仲介者として取るべき行動（待機・傾聴・介入など）を導出する知覚レイヤーを提案。実時間推論やマルチモーダル同期などの展開制約も議論する。
- ソーシャルロボットのターンテイキングのためのマルチモーダル音声活動予測：音声活動関連事前学習エンコーダを用いたアプローチ対話システム2026/7/1
音声のみのVAPを拡張し、音声と映像の同期入力を用いてソーシャルロボットのターンテイキング予測を行うフレームワークを提案。事前学習済みの音声視覚バックボーンを低ランク適応で調整し、話者間注意機構と意味的一貫性損失を導入して性能を向上させた。
- ロボットの共話における感情を考慮した効率的な象徴的ジェスチャ予測ジェスチャ生成2026/4/1
音声なしでテキストと感情から象徴的ジェスチャの位置と強度を予測する軽量トランスフォーマーを提案し、BEAT2データセットでGPT-4oを上回る性能を実証した。
- 作業以上の価値を加える：異文化間能力学習へのロボット統合のための実践的ガイドライン教育ロボット/HRI2026/2/1
教師とのデザインワークショップを通じて、K-12学校で社会ロボットを異文化間教育に統合するためのシナリオや役割、教師の補完方法、倫理的配慮を明らかにし、実践的な設計ガイドラインを提供した。
- 社会的ロボットが共感を表現すべきタイミングと方法HRI2025/9/1
大規模言語モデルを用いて、人間との相互作用における共感の手がかりを検出し、適切な共感的応答を生成するフレームワークwhEEを提案し、社会的ロボットHaruでの評価を行った。
- HRIのための3DMMベース覚醒度・感情価予測におけるデータ拡張感情認識2024/10/1
3DMMを用いたデータ拡張で覚醒度・感情価予測器を改善し、ロボットと3人の人間によるHRI設定でリアルタイム予測の精度と頑健性を向上させた。
- Developing Autonomous Robot-Mediated Behavior Coaching Sessions with Haru2024/2/1
- Ain't Misbehavin' -- Using LLMs to Generate Expressive Robot Behavior in Conversations with the Tabletop Robot Haru2024/2/1
- Social Robot Mediator for Multiparty Interaction2023/10/1
- GAN-Based Interactive Reinforcement Learning from Demonstration and Human Evaluative Feedback2021/4/1