SketchDirector: エージェント的レイアウト推論と詳細精錬による複雑シーン素描
SketchDirector: Complex Scene Sketching via Agentic Layout Reasoning and Detail Refinement
LLMでシーンを複数のベジェ曲線アセットに分解し、エージェント的推論ループで配置を計画、拡散事前分布で詳細を精錬するテキスト誘導の複雑シーン素描フレームワークを提案。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Yiqi Liang, Xiaodong Cun
分類: cs.CV
原文アブストラクト
Existing sketch generation methods often rely on image guidance and are largely limited to individual objects or simplified scenes, leaving text-guided complex scene sketching underexplored. We present SketchDirector, an agentic framework that mimics the human sketching workflow for automatic multi-concept scene sketching. Given a scene-level text prompt, SketchDirector first employs a large language model~(LLM) to decompose the scene into multiple draft assets, where each is represented by a set of Bézier curves. Then, an agentic reasoning loop iteratively plans and executes their spatial arrangement, guided by self-evolving memory. Finally, a detail refinement module leverages diffusion priors to enhance sketch quality while preserving geometric structure. To support future research and applications in multi-concept scene sketch generation, we further introduce the \textit{MCSketch8K} dataset, comprising editable vector assets, compositional layouts, and object-level manipulation annotations. Extensive experiments show that SketchDirector outperforms state-of-the-art baselines in semantic and compositional quality while effectively preserving overall contour organization during refinement. The project page is: \href{https://yiki77.github.io/SketchDirector/}{https://yiki77.github.io/SketchDirector/}.
関連論文
- ノイズ除去拡散確率モデル生成モデル
- フローマッチングのための結合ガイダンス生成モデル
- 制御可能な道路標示生成生成モデル
- 二次のドリフトモデル生成モデル
- GS-Agent: 生成シミュレーションによる4D物理世界の構築生成モデル
- 幾何学的整合によるテキスト画像蒸留における初期ノイズ感度の回復生成モデル