日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
画像生成arXiv:2610.26091

GeoNaviDiff:局所リーマン航法による拡散特徴への分離意味制御の転送

GeoNaviDiff: Transferring Disentangled Semantic Controls to Diffusion Features via Local Riemannian Navigation

シェア:XThreadsFacebookLINEはてブBluesky

StyleSpaceの分離制御を拡散モデルの局所リーマン軌道に転送し、教師なしで高忠実・因子選択的な実画像編集を実現した研究。

詳しい要約

1. どんなもの?

- 実画像の disentangled manipulation を目的とした教師なし cross-space framework - StyleSpace $S$ の解釈可能な制御を diffusion model の $h$-space に転写する手法 - 推論時に factor-conditioned Navigator が接線を予測し、geodesic に沿って編集を実現 - 編集参照画像や factor 別モデルを必要としない

2. 先行研究と比べてどこがすごい?

- StyleSpace $S$ は解釈可能だが GAN inversion に制限される - diffusion model は画像実現力が高いが明示的な factorized control basis を持たない - GeoNaviDiff は両者を橋渡しし、StyleSpace の disentangled 介入を diffusion $h$-space の局所 Riemannian 軌道へ転写 - 編集参照や factor 特化モデルなしで fidelity・factor selectivity・edit locality・trajectory smoothness を改善

3. 技術・手法の肝は?

- 再構成から切り離した supervision を構築 - 対応する StyleGAN reconstruction-edit pair から球面 Log-map tangent を抽出 - その tangent を実画像の diffusion state へ parallel transport - 共有された factor-conditioned Navigator が推論時に tangent を予測 - norm-preserving geodesic realization と source-anchored rollout で reverse process を安定化

4. どうやって有効だと検証した?

- 複数データセットで実験 - 比較手法に対して fidelity、factor selectivity、edit locality、trajectory smoothness で優位 - 詳細な定量指標や被験者評価は要旨からは不明

5. 議論はある?

- 編集参照や factor 別モデルを不要にしつつ安定化する設計が議論の中心 - 限界や失敗ケース、計算コスト、他分野への一般化は要旨からは不明

6. 次に読むべき論文は?

- StyleGAN と StyleSpace $S$ に関する研究 - GAN inversion の手法 - diffusion model の $h$-space および Riemannian/geodesic 編集に関する研究 - parallel transport や tangent space を用いた表現操作の関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tao Sun, Huanting Guo, Baao Xie, Zhou Fang, Qiuyu Chen, Hao Zheng, Wenjun Zeng

分類: cs.CV

原文アブストラクト

Disentangled real-image manipulation requires factor-specific semantic control while preserving image fidelity and non-target content. StyleSpace $S$ provides interpretable controls but is limited by GAN inversion, whereas diffusion models offer stronger image realization without an explicit factorized control basis. We introduce GeoNaviDiff, an unsupervised cross-space framework that transfers disentangled StyleSpace interventions to local Riemannian trajectories in diffusion $h$-space. GeoNaviDiff constructs reconstruction-decoupled supervision by extracting a spherical Log-map tangent from a matched StyleGAN reconstruction-edit pair and parallel-transporting it to the real-image diffusion state. A shared, factor-conditioned Navigator predicts this tangent at inference, while norm-preserving geodesic realization and source-anchored rollout stabilize the reverse process without edited references or factor-specific models. Experiments across multiple datasets show that GeoNaviDiff outperforms the compared methods in fidelity, factor selectivity, edit locality, and trajectory smoothness.

関連論文

PR本紙発行元 EmplifAI