TactileLab: せん断感覚を効率的にシミュレートする触覚シミュレーションによるSim-to-Real巧緻マニピュレーション

- IsaacLab 上に構築されたスケーラブルなマルチモーダル触覚シミュレーションのフレームワーク TactileLab を提案する研究。 - 光学フローに基づく新しい触覚表現 simulated tactile flow を中心に据え、せん断を伴う接触リッチな manipulation のための sim-to-real パイプラインを提供する。 - 触覚画像を simulated tactile flow と depth field に変換する real-to-sim tactile translation と、新しい触覚データ収集法も含む。 - 双腕および dexterous in-hand manipulation を含む実機タスクでの展開を示す。

- 従来はせん断を deformable や soft-body simulation で高忠実度に模擬すると計算コストが大きく、大規模 reinforcement learning へのスケールが困難だった。 - TactileLab は soft-body physics に頼らず rigid-body simulation で接触界面の密な tangential motion を推定し、せん断関連の接触ダイナミクスを符号化する tactile flow field を得る点が異なる。 - 幾何特徴を与える contact depth field と flow field を相補的に組み合わせる。 - 長期的な proprioceptive 信号と豊富な触覚観測を同時処理する新しい policy architecture を導入する。 - 実触覚画像を simulated tactile flow と depth field へ写像する real-to-sim tactile translation を提案し、多様な触覚センサ設計で検証する。

- 基盤は IsaacLab 上のスケーラブルなマルチモーダル触覚シミュレーション。 - soft-body physics の代わりに rigid-body simulation を用い、接触界面の密な tangential motion を効率的に推定して tactile flow field を生成する。 - tactile flow field は contact depth field 由来の幾何特徴を補完する。 - 長期的な proprioceptive 信号とリッチな触覚観測を jointly に処理する新規 policy architecture を採用する。 - sim-to-real のため、実 tactile image stream を simulated tactile flow と depth field に変換する real-to-sim tactile translation と、新しい触覚データ収集法を組み合わせる。

- 複数の contact-rich タスクにおいて、simulated tactile flow を用いて学習した policy が大規模に効率的学習し、接触を意識した創発的挙動を示すことを確認する。 - real-to-sim tactile translation を多様な触覚センサ設計にわたり検証する。 - このパイプラインを用いて、双腕および dexterous in-hand manipulation を含む実世界タスクでの展開を実証する。 - 個々のタスク名や定量指標の詳細は要旨からは不明。

- rigid-body simulation による tactile flow 推定が、soft-body ベースのせん断模擬の代替として計算効率とスケーラビリティの面で有効である可能性を示す。 - 実触覚画像から simulated tactile flow と depth field への translation により、異種触覚センサ間の sim-to-real ギャップを扱える可能性がある。 - 一方、rigid-body 近似が実せん断変形をどこまで表現できるか、translation の汎化性や限界については要旨からは不明。 - 定量的な比較や失敗事例、制約に関する議論は要旨からは不明。

- IsaacLab（本手法の基盤シミュレータ）。 - soft-body / deformable simulation を用いた高忠実度触覚シミュレーションの先行研究（具体的な論文名は要旨からは不明）。 - optical-flow ベースの触覚表現に関する研究（具体的な論文名は要旨からは不明）。 - sim-to-real tactile translation や real-to-sim 触覚変換の関連研究（具体的な論文名は要旨からは不明）。 - dexterous in-hand manipulation および dual-arm manipulation の触覚強化学習研究（同分野の定番として一般名で挙げる）。