详细解读
3DGUT 从一个经常被忽略的渲染假设出发:原始 3DGS 基本按理想针孔相机投影高斯。真实设备可能有鱼眼畸变、广角畸变、滚动快门或其他非线性成像过程;如果先把图像强行去畸变再训练,信息可能已经被重采样损失。
论文用 Unscented Transform 替代经典 EWA 风格的局部线性投影。一个高斯由一组 sigma points 表示,这些点可以穿过任意非线性相机函数精确投影,再重构屏幕空间分布的近似足迹。这样既保留 splatting 的效率,又能支持更多相机模型。
第二个重点是把高斯渲染和光线追踪式的二次射线对齐。反射、折射这类效果不是简单的主相机射线投影,3DGUT 展示了高斯表示如何在射线路径发生交互后继续参与渲染。
这篇论文说明 3DGS 正从快速查看技巧成熟为更通用的图形基元。代价是数学和实现复杂度更高,但收益是能处理更接近生产环境的相机、全景设备和光学效果。