日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
ニューラルレンダリングarXiv:2608.05920

浮遊放射輝度ネットワーク

Floating Radiance Networks

シェア:XThreadsFacebookLINEはてブBluesky

明示的なレイトレーシング可能なジオメトリと連続的なニューラル放射輝度関数を組み合わせた新しいニューラルシーン表現を提案し、インタラクティブなレンダリングや変形、編集を可能にした。

詳しい要約

1. どんなもの?

Floating Radiance Networks (FlaRe) は、明示的なレイトレース可能なジオメトリと連続的なニューラル放射輝度関数を組み合わせたニューラルシーン表現。シーンは浮遊する平面状の一般化ガウシアンプリミティブで表現され、各プリミティブは局所的な放射輝度場のコンパクトな潜在記述子を持つ。軽量なデコーダが記述子、局所表面座標、視線方向を色と不透明度にマッピングする。ハードウェアアクセラレーションによるプリミティブ交差判定により、インタラクティブなレンダリングと再帰的レイトレーシング(反射、屈折、透明、影)を可能にする。また、プリミティブレベルの変形、メッシュ抽出、見た目のスタイライゼーションを学習済み記述子空間で直接サポートする。

2. 先行研究と比べてどこがすごい?

従来のニューラルシーン表現(NeRFなど)は単一のレンダリングパラダイムに密結合しており、従来のグラフィックスワークフローとの統合が限定的だった。FlaReは、ニューラルフィールドの表現力と、明示的にアドレス可能で効率的にクエリ・操作可能な構造を両立し、再帰的レイトレーシングやジオメトリ操作、アピアランス編集を統一的なシーンモデルで実現する点が優れている。

3. 技術・手法の肝は?

手法の核は、シーンを浮遊する平面状の一般化ガウシアンプリミティブで表現し、各プリミティブに局所放射輝度場の潜在記述子を持たせること。シーン全体で共有される軽量デコーダが、記述子・局所表面座標・視線方向から色と不透明度を予測する。これにより、明示的なジオメトリ構造を保ちつつ、ニューラルフィールドの表現力を維持する。ハードウェアアクセラレーションによるプリミティブ交差判定で効率的なレンダリングと再帰的レイトレーシングを実現し、記述子空間での操作により変形やスタイライゼーションを可能にする。

4. どうやって有効だと検証した?

標準的な再構成ベンチマークを用いた実験で、コンパクトなプリミティブセットを使用しながら競争力のあるレンダリング品質を示した。具体的なデータセットや比較手法は要旨からは不明だが、再構成品質の評価が行われている。

5. 議論はある?

要旨からは、特定の議論や限界についての言及はない。ただし、明示的ジオメトリとニューラルフィールドのハイブリッド表現のトレードオフ(例えば、プリミティブ数と品質のバランス、複雑なシーンでのスケーラビリティなど)が考えられるが、要旨には記載がない。

6. 次に読むべき論文は?

要旨で参照されている先行研究は明示されていないが、関連する分野としてNeural Radiance Fields (NeRF) や3D Gaussian Splattingが挙げられる。また、ソースコードが公開されているため、FlaReの実装を直接参照することも有用。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Krzysztof Byrski, Rafał Tobiasz, Grzegorz Wilczyński, Mikołaj Zieliński, Dawid Baran, Dominik Belter, Jacek Tabor, Przemysław Spurek

分類: cs.CV

原文アブストラクト

Recent advances in neural scene representations enable photorealistic novel-view synthesis, yet most methods remain tightly coupled to a single rendering paradigm, limiting their versatility and integration with conventional graphics workflows. We introduce Floating Radiance Networks (FlaRe), a neural scene representation combining explicit ray-traceable geometry with continuous neural radiance functions. A scene is represented by floating planar generalized Gaussian primitives, each carrying a compact latent descriptor of a local radiance field. A lightweight decoder shared across the scene maps this descriptor, local surface coordinates, and viewing direction to color and opacity. This formulation preserves the expressiveness of neural fields while providing an explicitly addressable structure that can be efficiently queried and manipulated. Hardware-accelerated primitive intersections enable interactive rendering and recursive ray-tracing, including reflections, refractions, transparency, and shadows. The same representation further supports primitive-level deformation, mesh extraction, and appearance stylization directly in its learned descriptor space. Experiments across standard reconstruction benchmarks demonstrate competitive rendering quality while using a compact set of primitives. Together, these results establish FlaRe as a versatile representation that brings high-fidelity neural rendering, ray-tracing, geometric manipulation, and appearance editing into a unified scene model. Source code is available online. Source code can be found at: https://github.com/KByrski/FlaRe

関連論文