日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
画像生成arXiv:2608.03971

UniWorld-Design: ピクセル生成からレイヤー原生デザインへ

UniWorld-Design: From Pixel Generation to Layer-Native Design

シェア:XThreadsFacebookLINEはてブBluesky

画像生成をピクセル単位ではなく意味的なRGBAレイヤー単位で行うフレームワークを提案。テキストから独立したRGBA素材を生成するT2RGBAと、完成画像をレイヤーに分解するI2Lの2モデルで構成され、編集や分解を指示可能にする。

詳しい要約

1. どんなもの?

UniWorld-Designは、画像生成をピクセル単位の合成から、意味的RGBAレイヤーを生成・理解・編集の基本単位とする構造化された視覚的構成へと再定義するフレームワークである。Text-to-RGBA (T2RGBA)モデルとImage-to-Layer (I2L)モデルの2つから構成される。T2RGBAはテキストから独立したRGBAアセットを直接生成し、I2Lは完成画像、全体指示、レイヤーごとのプロンプトを入力として、順序付けられた完全な意味的RGBAレイヤーを共同生成する。

2. 先行研究と比べてどこがすごい?

従来の画像生成はピクセルレベルの合成に焦点を当てており、レイヤー構造を考慮していなかった。UniWorld-Designは、人間のデザイナーがレイヤーを用いて視覚コンテンツを操作するように、マルチモーダル生成モデルにレイヤー固有の設計空間を提供する点で革新的である。また、I2Lは可視ピクセルの分割ではなく完全な意味的オブジェクトを学習するため、レイヤーを移動・削除しても使用可能である点が先行研究と異なる。

3. 技術・手法の肝は?

手法の核心は、画像生成の基本単位をピクセルから意味的RGBAレイヤーに置き換えることである。T2RGBAはテキストから直接RGBAアセットを生成する。I2Lは、画像と指示を入力として、トップレベル分解、再帰的分解、対象抽出をサポートする指示インターフェースを備え、順序付けられた完全な意味的RGBAレイヤーを生成する。これにより、レイヤー操作が指示で制御可能になる。

4. どうやって有効だと検証した?

Crelloベンチマークにおいて、I2LはレイヤーごとのRGB L1誤差を37%削減し、Alpha Soft IoUでQwen-Image-Layeredに対して34%の相対改善を達成した。また、T2RGBAはCLIP Scoreで最高値を達成し、LayerDiffuseやOmniAlphaを上回った。

5. 議論はある?

要旨からは、レイヤー生成の計算コストや、複雑なシーンでの分解精度の限界、実世界の画像への適用可能性などに関する議論は不明である。また、意味的レイヤーの定義や、生成されたレイヤーの編集可能性の評価方法についての詳細も要旨には含まれていない。

6. 次に読むべき論文は?

要旨で参照されている研究として、Qwen-Image-Layered、LayerDiffuse、OmniAlphaが挙げられる。また、関連する分野として、レイヤー認識画像生成や意味的画像分解に関する研究が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zongjian Li, Zhiyuan Yan, Chenxu Bai, Chen Chen, Haoxiang Sun, Shaodong Wang, Feize Wu, Shenghai Yuan, Bin Lin, Zheyuan Liu, Yuwei Niu, Li Yuan

分類: cs.CV

原文アブストラクト

We introduce UniWorld-Design, a framework that redefines image generation from flat pixel synthesis to structured visual composition, with semantic RGBA layers as the atomic units of generation, understanding, and editing. Our key insight is that pixels define how an image is rendered, whereas layers define how an image is created, understood, and edited. Just as human designers create and manipulate visual content through layers rather than raw pixels, UniWorld-Design equips multimodal generative models with a layer-native design space. UniWorld-Design comprises two models. The Text-to-RGBA (T2RGBA) model generates standalone RGBA assets directly from text. The Image-to-Layer (I2L) model conditions on a finished image, a global instruction and per-layer prompts, and jointly produces ordered, complete semantic RGBA layers. Its instruction interface supports top-level decomposition, recursive decomposition and targeted extraction, making layering an instruction-addressable operation for agentic editing. Because I2L learns complete semantic objects rather than visible-pixel partitions, its layers stay usable when moved or removed. On the Crello benchmark, I2L reduces per-layer RGB L1 error by 37% and achieves a 34% relative improvement in Alpha Soft IoU over Qwen-Image-Layered. Separately, T2RGBA achieves the highest CLIP Score, outperforming LayerDiffuse and OmniAlpha.

関連論文