RayGauss

基于体积高斯的光线投射用于逼真的新视图合成

讨论：https://huggingface.co/papers/2408.03356

基于可微分体积渲染的方法在新视图合成方面取得了显著进展。一方面，创新的方法用局部参数化结构取代了神经辐射场（NeRF）网络，从而在合理的时间内实现高质量的渲染。另一方面，这些方法采用可微分的散射替代NeRF的光线投射，利用高斯核来快速优化辐射场，从而能够细致适应场景。然而，不规则间隔核的可微分光线投射很少被探索，而散射尽管能够实现快速渲染，但容易出现明显的伪影。我们的工作通过提供一种物理一致的发射辐射c和密度σ的分解公式，填补了这一空白，该公式使用与所有频率的颜色表示相关的球形高斯/谐波进行分解。我们还介绍了一种方法，该方法使用一种算法进行不规则分布高斯的可微分光线投射，该算法逐层集成辐射场并利用BVH结构。这样，我们的方法能够精细地适应场景，同时避免散射伪影。因此，我们在保持合理训练时间的同时，实现了比最先进技术更高的渲染质量，并在Blender数据集上实现了25 FPS的推理速度。