RenderFormer：シーンごとのトレーニング不要なグローバルイルミネーションニューラルレンダリング
2025-06-01
RenderFormerは、完全なグローバルイルミネーション効果を持つ三角形ベースのシーン表現から画像を直接レンダリングするニューラルレンダリングパイプラインであり、シーンごとのトレーニングやファインチューニングは必要ありません。物理ベースのアプローチではなく、レンダリングをシーケンスツーシーケンス変換として定式化します。反射特性を持つ三角形を表すトークンのシーケンスは、小さなピクセルパッチを表す出力トークンのシーケンスに変換されます。トランスフォーマーベースの2段階パイプラインを使用します。ビューに依存しない段階では、三角形間の光輸送をモデル化し、ビューに依存する段階では、ビューに依存しない段階によって導かれる、レイバンドルをピクセル値に変換します。ラスタ化やレイ トレーシングは必要ありません。