ClothAtlas: 自己遮蔽下での衣服の同定と状態推定の同時実行
ClothAtlas: Joint Garment Identification and State Estimation under Self-Occlusion
部分的な点群と正規メッシュのライブラリから、衣服の種類を特定しつつ完全な形状を推定するグラフ条件付きフローマッチング手法を提案。再学習なしで新しい衣服にも対応し、把持位置の推定精度も向上させた。
著者: Jens Lundell, Alberta Longhini, Lei Shu, Hemal Arora, Evan Robert, Carlota Parés-Morlans, Marcel Büsching, Mårten Björkman, Jeannette Bohg
分類: cs.CV, cs.RO
原文アブストラクト
Garment manipulation requires inferring both garment identity and complete configuration from partial, self-occluded observations. This creates a chicken-and-egg problem: completing a partial observation requires a garment-specific deformation prior, while identifying the garment requires a configuration that explains the observation. We introduce ClothAtlas, which jointly identifies garments and estimates their complete configurations from partial point clouds and a library of canonical meshes. A shared graph-conditioned flow-matching model samples configurations for each candidate mesh and ranks candidates by observation fit. The model accommodates different mesh shapes, vertex counts, and connectivities, allowing new garments to be added from canonical meshes alone without retraining. On held-out DexGarmentLab garments, ClothAtlas ranks the correct mesh first among 221 candidates for all 22 test garments from a single flat observation. From a single self-occluded observation, it identifies 15/22 garments, compared with 8/22 for a deterministic graph estimator. Persistent vertex identities support grasp-target localization on real garments, reducing mean error from 15.4 to 6.4 cm overall and from 17.0 to 8.3 cm on occluded targets compared with dense descriptor matching. Project page: https://clothatlas.github.io/
関連論文
- 狙って叩け:方向条件付き変形可能線状物体の動的マニピュレーション変形物体マニピュレーション
- FoldNet++:ロボットによるTシャツ折り畳み・展開のための大規模合成データセット変形物体マニピュレーション
- 非無視可能なダイナミクスを持つ変形可能な線状物体の自己教師あり物理情報マニピュレーション変形物体マニピュレーション
- 自己カリキュラム型モデルベース強化学習による変形可能な線状物体の形状制御変形物体マニピュレーション
- 3D変形物体の計画と推論による階層的テキストからのロボット造形変形物体マニピュレーション
- SSFold: 人間の実演からグラフダイナミクスを学習し任意のしわくちゃ布を折り畳む変形物体マニピュレーション