社会的AI/VR2026/9/23arXiv:2609.27246

聞くことと映すこと：VR内の身体化AIエージェントに対する言語的調和と行動的模倣が社会的・共感的知覚に与える影響

Listening and Mirroring: The Effects of Verbal Attunement and Behavioral Mimicry on Social and Empathic Perceptions of Embodied AI Agents in VR

シェア:X Threads Facebook LINE はてブ Bluesky

VR内の身体化AIカウンセラーに言語的調和と表情・姿勢の模倣を組み合わせ、20名の被験者実験で共感や人間らしさの知覚への影響を調べた。

詳しい要約

1. どんなもの？

- VR内のembodied AI agentを対象に、会話中のverbal attunementとbehavioral mimicryが社会的・共感的知覚に与える影響を調べた研究。 - conversational AIとreal-time facial-expression and posture mimicryを組み合わせたembodied AI counselorを開発。 - 2×2 within-subjects studyで20名を対象に評価。

2. 先行研究と比べてどこがすごい？

- 従来、verbal attunementとnonverbal mimicryはそれぞれ社会的評価を改善し得るとされてきた。 - しかしbehavioral mimicryはreal-time conversational AIとの相互作用外で主に研究されてきた。 - 本研究は、immersive conversation中にcontextually responsive dialogueとnonverbal behavior適応を同時に行う点で先行研究と異なる。

3. 技術・手法の肝は？

- conversational AIにreal-time facial-expression mimicryとposture mimicryを統合したembodied AI counselorを構築。 - 応答はverbally attunedまたはneutralに操作。 - 2×2 within-subjects designでverbal attunementとbehavioral mimicryを操作し、immersive conversation中のユーザー反応を測定。

4. どうやって有効だと検証した？

- 20名の参加者による2×2 within-subjects studyを実施。 - verbal attunementがperceived empathyの最も信頼できる駆動要因であることを示した。 - behavioral mimicryはperceived humannessと限界的に関連。 - mimicry exposureが多いほどempathy, positivity, humannessと予備的・探索的に正の関連、特に女性参加者で見られた。

5. 議論はある？

- multimodal synchronyはVR内の共感的会話エージェント設計における単純な相加戦略ではない。 - real-time interaction中にverbalとnonverbal behaviorをどう組み合わせるかを考慮する必要性を強調。 - behavioral mimicryの効果は限界的・予備的であり、性差の可能性も示唆されるが、要旨からは詳細な議論は不明。

6. 次に読むべき論文は？

- 要旨で参照/比較されている具体的な論文名は不明。 - 関連手法としてconversational AI、verbal attunement、behavioral mimicry、facial-expression mimicry、posture mimicry、embodied agents in VRが挙げられる。 - 同分野の定番としてembodied conversational agentsやsocial roboticsにおけるempathy perception研究を読むべき。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Nathalia Gomez, Haig Shamlian, Omar Khan, Tiffany D. Do

分類: cs.HC, cs.AI

原文アブストラクト

As embodied agents take on increasingly social and relational roles in VR, visual realism and embodiment alone may be insufficient; users must also perceive these agents as emotionally attuned, supportive, and humanlike. Prior work suggests that verbal attunement and nonverbal mimicry can each improve users' social evaluations of embodied agents. However, behavioral mimicry has largely been studied outside of real-time, conversational AI interactions, leaving limited understanding of how users respond when an agent simultaneously generates contextually responsive dialogue and adapts its nonverbal behavior during an immersive conversation. To address this gap, we developed an embodied AI counselor that combines conversational AI with real-time facial-expression and posture mimicry, while producing either verbally attuned or neutral responses. We evaluated the system in a 2 X 2 within-subjects study with 20 participants, manipulating verbal attunement and behavioral mimicry. Results showed that verbal attunement was the most reliable driver of perceived empathy. Behavioral mimicry showed a marginal relationship with perceived humanness, while greater mimicry exposure showed preliminary, exploratory positive associations with empathy, positivity, and humanness, particularly among female participants. Together, these findings show that multimodal synchrony is not a simple additive strategy for designing empathic conversational agents in VR and underscore the need to consider how verbal and nonverbal behaviors are combined during real-time interaction.

arXivで原文を読む →arXiv概要ページ

← 論文一覧