インタラクティブかつ微分可能なライティングのためのニューラル・レンダリング・プロキシ

アニメーション制作のライティング作業では、小さな修正でもグローバルイルミネーションや複雑なシェーダーを再計算する必要があるため、1フレームの再レンダリングに数分から数時間かかることがある。Neural Render Proxies for Interactive and Differentiable Lightingは、こうした反復時間を短縮するため、固定されたカメラとマテリアルを持つ静的シーン向

アニメーション制作のライティング作業では、小さな修正でもグローバルイルミネーションや複雑なシェーダーを再計算する必要があるため、1フレームの再レンダリングに数分から数時間かかることがある。Neural Render Proxies for Interactive and Differentiable Lightingは、こうした反復時間を短縮するため、固定されたカメラとマテリアルを持つ静的シーン向けのニューラル・レンダリング・プロキシ（NRP）を提案する。

この手法は、従来のレンダリングをパスサンプリングと放射計算に分けることから始まる。ライティング条件に依存しない1回のレンダリングパスで光の伝達経路のサンプルを収集した後、シーンごとの軽量なニューラルネットワークが、シーン内の位置から各画像ピクセルまで光がどのように伝わるかを学習する。その後は、ライティング条件を素早く変えながら結果を評価できる。

研究チームは、この手法が微分不可能なプロダクションレンダラーとも互換性があり、推論時のメモリ要件を小さく維持できると説明している。計算コストは、シーンや外観の複雑さよりも、解像度、光源の数、ライティングパラメータの数に応じて増加する。評価では、グラウンドトゥルースのパストレーシングに近い画質を維持しながら、約30〜60Hzのリライティングを実演した。また、画像空間での編集や、生成された目標画像からライティングパラメータを見つける勾配ベースの逆問題にも利用できる。

この論文は2026年のEurographics Symposium on Rendering（EGSR）で発表され、Sergio Sancho、Alexander Rath、Marco Manzi、Pascal Chang、Amit H. Bermano、Derek Nowrouzezahrai、Markus Gross、Marios Papasが著者として参加した。

原文動画: https://www.youtube.com/watch?v=jgD5w3RM0k4