研究论文

SuGaR: Surface-Aligned Gaussian Splatting for Efficient 3D Mesh Reconstruction and High-Quality Mesh Rendering

一种表面对齐方法,让 3D 高斯更容易转换为可编辑网格,同时尽量保留高质量渲染。

November 2023Mesh ReconstructionarXiv:2311.12775

详细解读

SuGaR 从一个实际痛点出发:一个好看的 splat cloud 并不等于一个可用的 mesh。原始 3DGS 的高斯可能漂浮、重叠或在体积中变厚,很难直接定义干净表面。

论文加入表面对齐正则,鼓励高斯在优化过程中贴近局部曲面结构。随后,它把高斯分布视为表面证据,并使用 Poisson 重建提取网格。

提取网格后,方法还可以把高斯绑定回网格表面,让用户同时得到可编辑几何和接近 splat 的外观质量。这种混合设计很实用,因为它没有放弃 3DGS 的渲染优势。

它的长期价值是区分了两个目标:照片级新视角合成和可编辑几何资产。SuGaR 说明如果你希望 splat 进入 DCC、动画或游戏引擎流程,训练目标必须关心表面组织。

论文解决了什么

SuGaR 解决原始 3DGS 的一个核心弱点:优化后的高斯视觉上有效,但几何组织并不干净。论文加入正则,让高斯更贴近场景表面。

当高斯更表面对齐后,方法可以抽取网格,并可选择把高斯重新绑定到网格上,用于编辑和高质量渲染。

核心思路

  • 引入正则,让高斯更倾向于落在表面上。
  • 使用 Poisson 重建从对齐高斯中抽取网格。
  • 支持把高斯附着到网格上的后续细化。

为什么重要

  • 它是连接 3DGS 和 mesh 工作流的重要早期论文。
  • 它让 splat 更适合编辑、动画、重光照和传统 3D 工具。
  • 它澄清了视觉好看和几何可用之间的区别。

适合阅读的人

  • 你需要从 Gaussian Splatting 重建中得到 mesh。
  • 你正在比较 3DGS 表面重建方法。
  • 你想把 splat 渲染接入 DCC 或游戏引擎资产流程。

局限与注意点

  • 网格质量仍依赖采集质量和高斯表面对齐程度。
  • Poisson 重建可能平滑或填补不希望的几何。
  • 透明、反光和细薄结构依然困难。