日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
画像編集/3D制御arXiv:2610.40973

RADI3N: パラメトリック3D制御による幾何学的画像編集

RADI3N: GeometRic ImAge EDiting via ParametrIc 3D CoNtrol

シェア:XThreadsFacebookLINEはてブBluesky

パーツ単位のパラメトリック3D制御で画像を編集するフレームワーク。境界の回転場不連続を抑える変形モジュールと、位置バイアスを抑えたテクスチャ転写で高忠実な編集を実現する。

詳しい要約

1. どんなもの?

- 拡散モデルベースの画像編集フレームワーク - 対象は物体のパーツ単位のパラメトリック3D制御 - 意味的に根拠づけられた(セマンティックに基づく)パーツ単位の物体操作を実現 - 大規模な幾何変換下でも外観・テクスチャを追従させる編集を目指す

2. 先行研究と比べてどこがすごい?

- 既存手法は物体全体を手動riggingで操作するか、パーツ単位では2Dハンドルに戻るかの二択 - 既存手法は大きな変換下での外観・テクスチャのモデリングが苦手で、幾何集約的な編集で非現実的な出力になりがち - RADI3Nはパーツ単位のパラメトリック3D制御を実現し、幾何忠実度・視点一貫性・制御性でSOTAを達成

3. 技術・手法の肝は?

- CS-ARAP変形モジュール: 近傍covariance smoothingによりパーツ境界での回転場の不連続を抑制し、複雑なパーツ編集下でも構造的に一貫した変形を生成 - inversion-free selective texture transfer: cross-image attention内で高周波の位置バイアスを抑制し、低周波のセマンティック手がかりを増幅 - これにより厳密な空間バイアスを排除しセマンティックマッチングを可能にし、元の外観が編集後パーツの新幾何に追従

4. どうやって有効だと検証した?

- 実験によりRADI3Nが幾何忠実度(geometric fidelity)、視点一貫性(viewpoint consistency)、制御性(controllability)でSOTA性能を達成 - 具体的なデータセット・指標・比較手法は要旨からは不明

5. 議論はある?

- 要旨からは不明(限界や失敗ケース、計算コスト等の議論は記載なし)

6. 次に読むべき論文は?

- CS-ARAP(As-Rigid-As-Possible変形の拡張) - cross-image attentionを用いたtexture transfer関連研究 - diffusion-based image editingのパーツ単位操作手法 - 具体的な参照論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Abdul Wasi, Akhil Gorugantu, Mahesh Bhosale, Anjan Dutta, Junsong Yuan, Sauradip Nag, David Doermann

分類: cs.CV

原文アブストラクト

Recent diffusion-based methods have substantially advanced image editing, yet parametric 3D control at the part level remains challenging. Existing approaches either operate on whole objects with manual rigging, or revert to 2D handles at the part level. They also struggle to model appearance and texture under large transformations, leading to unrealistic outputs in geometry-intensive edits. To address these limitations, we introduce RADI3N, a framework for semantically-grounded part-aware object manipulation with parametric 3D control. Our CS-ARAP deformation module suppresses rotation-field discontinuities at part boundaries via neighborhood covariance smoothing, producing structurally consistent deformations under complex part-level edits. We further introduce an inversion-free selective texture transfer mechanism that suppresses high-frequency positional biases and scales up low-frequency semantic cues within cross-image attention. This eliminates strict spatial bias and supports semantic matching, allowing source appearance to follow the edited part onto its new geometry. Experiments demonstrate that RADI3N achieves state-of-the-art performance in geometric fidelity, viewpoint consistency, and controllability.

PR本紙発行元 EmplifAI