日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
画像生成arXiv:2608.29997

離散拡散ブリッジによる時空間整合画像変換と生成

Discrete Diffusion Bridges for Spatiotemporally Aligned Image Translation and Generation

シェア:XThreadsFacebookLINEはてブBluesky

標準的な離散拡散の時空間的な不整合を解決するため、吸収状態をマスクとソースの混合にし、情報量に基づくノイズスケジュールを導入したフレームワークを提案。

詳しい要約

1. どんなもの?

本論文は、画像変換と画像生成における標準的な離散拡散モデルの時空間的な位置ずれ(spatiotemporal misalignment)を解決するためのフレームワーク、Discrete Diffusion Bridges (DDB) を提案している。標準的な離散拡散では、ランダムなスケジュールでデータを純粋なマスク状態に劣化させるが、その過程で空間的にはソース画像の構造的先行情報が失われ、時間的にはランダムなマスキング順序が推論時の「易しいものから先に、難しいものを後で」というデコード機構と矛盾する。DDBは、ドメイン間の直接かつ効率的な軌道を構築することで、この二重の位置ずれを解決する。

2. 先行研究と比べてどこがすごい?

先行研究の標準的な離散拡散モデルは、画像変換や生成において、純粋なマスク状態への劣化によりソース画像の構造的先行情報を捨ててしまい、またランダムなマスキング順序が推論時のデコード機構と矛盾するという問題があった。DDBは、吸収状態をマスクとソーストークンの確率的混合に再定義するhybrid absorption機構と、情報量に基づくノイズスケジュールを導入することで、これらの問題を直接的に解決し、空間的・時間的な位置ずれを軽減する点が新しい。

3. 技術・手法の肝は?

手法の肝は、空間的にはhybrid absorption機構により、吸収状態をマスクとソーストークンの確率的混合として定義し、ソース画像の先行情報を潜在空間に空間的アンカーとして注入すること。時間的には、情報量に基づくノイズスケジュール(information-guided noise schedule)を設計し、セマンティックな変化量を定量化して、情報量の多い領域をより早いタイムステップで優先的に劣化させることで、モデルが不変領域からのロバストな文脈を用いて難しいセマンティックな変化を学習できるようにすること。

4. どうやって有効だと検証した?

多様な生成パラダイムにわたる広範な実験により、フレームワークの汎用性とロバスト性を検証している。具体的には、テキスト誘導のセマンティック操作と純粋な構造的画像変換の両方で、編集の整合性と構造的忠実度のバランスを効果的に取れることを示し、さらにテキストから画像への生成を補完し、極めて少ないサンプリングステップでもロバストな高品質なデコードを保証することを示している。

5. 議論はある?

要旨からは、提案手法の限界や特定の議論についての詳細は不明である。ただし、DDBが多様な生成パラダイムで有効であると主張している一方で、計算コストや他の拡散モデルとの比較など、具体的な議論は要旨には含まれていない。

6. 次に読むべき論文は?

要旨で参照されている関連研究は明示されていないが、離散拡散モデルや画像変換・生成の分野における標準的な手法として、Discrete Diffusion Models(例:D3PM)、Diffusion Bridges、Text-to-Image Diffusion Models(例:Stable Diffusion)などが関連する。次に読むべき論文としては、これらの基礎となる論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xing Xie, Jiawei Liu, Shijun Zhou, Huijie Fan, Zhi Han, Yandong Tang, Liangqiong Qu

分類: cs.CV

原文アブストラクト

We propose Discrete Diffusion Bridges (DDB), a novel framework designed to resolve the fundamental spatiotemporal misalignment of standard discrete diffusion in image translation and generation. By corrupting data into a pure mask state via a random schedule, the conventional forward process induces a twofold misalignment: spatially, this pure-mask destination entirely discards the rich structural priors of the source image; temporally, the random masking order inherently contradicts the ``easy-first, hard-last'' decoding mechanism used during inference. To address this, DDB constructs a direct and efficient trajectory between domains. Spatially, we introduce a hybrid absorption mechanism that redefines the absorbing state to a stochastic mixture of mask and source tokens, effectively injecting source prior as spatial anchors into the latent space. Temporally, we design an information-guided noise schedule that quantifies semantic variation to prioritize the corruption of high-information regions at earlier timesteps. This ensures the model learns to resolve difficult semantic changes using robust context from invariant regions. Extensive experiments validate the versatility and robustness of our framework across diverse generative paradigms. DDB effectively balances edit alignment with structural fidelity across both text-guided semantic manipulation and pure structural image translation, while inherently complementing text-to-image generation and guaranteeing robust high-quality decoding under extremely low sampling steps. Code and models are available at \href{https://github.com/HKU-HealthAI/DDB}{https://github.com/HKU-HealthAI/DDB}.

関連論文