RenderFormer:无需训练的全局光照神经渲染引擎

2025-06-01

RenderFormer 是一种神经渲染管道,它可以直接从三角形表示的场景中渲染图像,并具有完整的全局光照效果,无需针对每个场景进行训练或微调。它将渲染制定为序列到序列的转换,其中表示具有反射特性的三角形的标记序列被转换为表示像素小块的输出标记序列。RenderFormer 包含两个阶段:一个与视角无关的阶段,模拟三角形之间的光传输;一个与视角相关的阶段,根据与视角无关的阶段的三角形序列,将表示光线束的标记转换为相应的像素值。两个阶段都基于 Transformer 架构,并通过最小的先验约束进行学习。无需光栅化,无需光线追踪。