研究论文

CylinderSplat: 3D Gaussian Splatting with Cylindrical Triplanes for Panoramic Novel View Synthesis

一篇关于全景新视角合成的 3DGS 论文,核心思路是用圆柱三平面替代笛卡尔三平面,并结合像素和体积分支处理稀疏 360 视图。

March 2026全景 3DGSarXiv:2603.05882

详细解读

CylinderSplat 关注全景新视角合成。360 度图像不是普通广角图多一些像素:它围绕观察者闭合,具有明显的径向结构,室内场景还常常符合墙面垂直、地面水平的布局。笛卡尔三平面在稀疏视角和大遮挡下容易扭曲这种几何。

核心表示是圆柱三平面。它不再沿普通 xyz 平面分解体积,而是使用更贴合半径、角度和高度的坐标,让特征沿着全景场景的自然结构传播,减少把房间硬塞进笛卡尔网格造成的失真。

模型包含两个互补分支:像素分支处理输入全景中已经清楚观测到的区域,体积分支利用圆柱三平面推断被遮挡或观测稀疏的区域。这种设计让模型既能利用可见证据,又能有结构地补全缺失空间。

输出是前馈 3DGS 表示,不需要像经典 3DGS 那样为每个场景长时间优化。它可以处理单张或多张全景输入,适合 VR、房产和室内采集;但圆柱先验比较依赖场景域,对任意物体扫描或非 Manhattan 户外场景不一定泛化。

论文解决了什么

CylinderSplat 面向全景新视角合成:稀疏 360 度输入让 cost volume refinement 和笛卡尔三平面都不太匹配场景几何。

它引入与全景结构对齐的圆柱三平面,并用双分支架构结合可见区域重建和遮挡区域补全。

核心思路

  • 为 360 度场景几何引入圆柱三平面。
  • 用双分支设计分别处理可见像素和遮挡体积补全。
  • 支持可变数量的全景输入。
  • 以高斯输出实现前馈全景新视角合成。

为什么重要

  • 它把 3DGS 适配到 VR 和室内空间常见的全景采集格式。
  • 它说明相机几何会影响学习式 3DGS 表示。
  • 它连接了单/多全景捕获和实时 splat 渲染。

适合阅读的人

  • 你处理 360 度相机或全景场景采集。
  • 你在为特殊相机类型设计前馈 3DGS 模型。
  • 你想看表示几何如何提升高斯预测。

局限与注意点

  • 圆柱先验不一定适合任意场景或物体中心采集。
  • 输入稀疏时,遮挡区域仍然是模型推断。
  • 前馈质量依赖训练数据和相机域匹配。