🎙️ 把手电筒照向频域:高斯溅射(3DGS)在信号处理中的数学真相
> 【格物致知·空频互偶】 想象手里拿着一块半透明的椭圆形彩色毛玻璃。如果拿一束平行的手电筒光穿过这块玻璃打在白墙上,墙上就会出现一个边缘柔和、中间浓郁的椭圆光斑。 > > 很多图形学开发者以为,计算机图形学里的 高斯溅射(3D Gaussian Splatting, 3DGS) 只不过是在三维空间里洒下数百万个发光的半透明椭球,再把它们一个一个压扁到屏幕上。 > > 在信号处理和应用数学视角下,这套机制对应着深刻的频域物理机理:高斯函数是时域与频域中唯一形式保持不变的傅里叶自对偶基函数。3D 高斯投影到 2D 屏幕的过程,严格等同于三维连续频谱在相机传感器平面上的傅里叶切片截取与各向异性低通滤波。
---
1. 高斯函数的自对偶性:最完美的时频平衡原子
在波动光学与信号处理中,要想在空间上把一个物体定位得很精确(空间尺寸极小),它在频谱上的频率范围就会变得极宽;反过来,要想频率极其纯粹(单色正弦波),它在空间上就必须无限延伸。
这就是海森堡测不准原理(Heisenberg Uncertainty Principle)在信息论中的体现:
数学上只有一个连续函数能在不等式中取到理论下界(\(\Delta x \cdot \Delta \omega = 1/2\)),那就是高斯函数(Gaussian Function)。
[空间域 3D 高斯椭球] [频域 3D 频谱窗口]
G(x; μ, Σ) ~ exp( -½ (x-μ)ᵀ Σ⁻¹ (x-μ) ) ◄══傅里叶变换══► Ĝ(ω) ~ exp(-i ωᵀμ) · exp( -½ ωᵀ Σ ω )
(空间协方差 Σ 越大,椭球在物理空间越延展) (频域带宽由 Σ⁻¹ 约束,高频分量衰减极快)
高斯函数具有傅里叶自对偶性(Self-Duality):空间域的高斯函数经过傅里叶变换后,在频域依然呈现为标准高斯函数。
这一特性使得高斯基元成为表达连续三维辐射场最紧致的时频基石。
> 傅里叶自对偶性 (Fourier Self-Duality) > 一个数学函数的傅里叶变换与其原本函数在解析形式上完全同构。高斯函数的傅里叶变换依旧是高斯函数,仅协方差矩阵与尺度因子发生逆向映射。
> 海森堡时频测不准下界 (Time-Frequency Uncertainty Bound) > 信号在时域(或空间域)的有效宽度与在频域的有效带宽之积存在理论物理极限。高斯分布是唯一能够在全空间达到最小乘积下界的连续波形。
---
2. 场景表示的本质:连续 Gabor 小波展开
把一个真实世界的三维场景变成计算机里的数据,历史上主要有三种数学路径。
3D 高斯溅射将场景连续辐射场 \(f(\mathbf{x})\) 展开为 \(N\) 个高斯基函数的加权和:
对整个辐射场公式两端执行三维连续傅里叶变换,频域表达式直接转化为各高斯谱的解析叠加:
这在泛函分析中严格对应 连续加窗 Gabor 框架(Gabor Frame / Windowed Fourier Transform)。每个高斯椭球都在空间局部提供了一扇平滑衰减窗,同时在频域施加了天然的低通滤波截断。
| 三维场景表征方案 📐 | 空间域物理形态 🌐 | 频域谱带分布 📡 | 混叠与走样抑制特性 🛡️ |
|---|---|---|---|
| 传统离散点云 | 狄拉克 \(\delta\) 脉冲离散采样 | 频域全通白噪声(高频无限延伸) | 极易产生莫尔条纹与锯齿断裂 |
| 3D 高斯溅射 (3DGS) | 局部平滑紧致的椭球基元 | 局部自适应各向异性高斯低通窗 | 天然具备平滑频带衰减特性 |
| 神经辐射场 (NeRF) | 全局隐式全连接神经网络 | 全局连续谱(依赖多分辨率哈希网格) | 依赖精细射线步进积分 |
3. 屏幕投影的本质:傅里叶切片定理
把三维高斯椭球投射到二维相机屏幕的过程(Splatting),在空间几何上是沿着视线方向进行线积分:
在医学 CT 成像和波动光学中,有一条经典的 傅里叶切片定理(Fourier Projection-Slice Theorem):
这一数学定理给出了清晰的物理图像:三维连续物体沿某方向投射到屏幕上的二维图像,其二维傅里叶变换,严格等于该物体三维傅里叶频谱通过原点且平行于相机平面的二维中心截面切片(Central Slice)。
[3D 空间高斯椭球] ──► 沿视线方向线积分投影 (Splatting) ──► [2D 屏幕椭圆投影]
│ │
3D 傅里叶变换 2D 傅里叶变换
▼ ▼
[3D 频域高斯频谱] ──► 相机传感器平面 2D 中心切片截取 ───────► [2D 频域低通滤波器]
3D 高斯协方差矩阵 \(\boldsymbol{\Sigma}\) 经过相机外参变换矩阵 \(\mathbf{W}\) 与透视投影雅可比矩阵 \(\mathbf{J}\) 映射后,屏幕上的二维协方差矩阵为:
在频域中,这一变换正是把 3D 频域高斯椭球沿着相机视角切出的二维各向异性低通滤波器。
> 傅里叶切片定理 (Fourier Projection-Slice Theorem) > 连续函数在空间中沿特定视线方向做一维线积分所产生的投影,其二维傅里叶变换严格等于该连续函数三维傅里叶频谱中通过频域原点且平行于投影平面的二维截面切片。
---
4. 频域抗混叠验证:Mip-Splatting 的奈奎斯特滤波
这一频域解释在 2024 年计算机视觉顶会 CVPR 获奖研究 Mip-Splatting 中得到了严格的实验证实。
当相机镜头拉远时,屏幕上的单个像素所对应的物理空间范围扩大,意味着相机的空间采样频率(Nyquist 频率)大幅下降。
如果高斯椭球没有相应地收缩频带,高斯的高频成分就会超过像素采样极限,产生剧烈的噪点与闪烁走样。
[Mip-Splatting 频域卷积抗锯齿补偿]
2D 屏幕投影矩阵 ──► Σ_final = J W Σ Wᵀ Jᵀ + ν · I (在频域中引入匹配像素网格的高斯低通抗混叠核)
Mip-Splatting 依据频域采样定理,在 2D 协方差矩阵中显式叠加了一个与像素尺度匹配的频域低通滤波核(\(\nu \mathbf{I}\)),确保了投影后的高斯频带始终处于奈奎斯特安全边界之内。
---
5. 总结:物理直觉与工程实现的统一
高斯溅射不仅仅是一种高速渲染椭球的光栅化算法。
从数学与信号处理的角度看: 1. 基函数表示:它利用了高斯函数的傅里叶自对偶性,构建了时频两端皆紧致的 Gabor 小波基; 2. 投影过程:它在物理上实现了三维频谱在相机传感器平面上的傅里叶中心切片; 3. 抗锯齿机制:它通过频域低通卷积满足了离散采样的奈奎斯特抗混叠极限。
理解了这些频域规律,才能在三维重建与实时渲染中更好地控制高斯密度的演化与图像质量。
---
📚 考据与权威学术档案 (Academic References)
1. 3D 高斯溅射奠基性文献:
- Kerbl, B., Kopanas, G., Leimkühler, T., & Drettakis, G. (2023). *3D Gaussian Splatting for Real-Time Radiance Field Rendering*. ACM Transactions on Graphics (SIGGRAPH 2023), 42(4), 139:1-14.
- 提出了利用各向异性 3D 高斯基元进行连续辐射场表征与可微光栅化渲染的核心框架。
- Yu, Z., Chen, A., Huang, B., Sattler, T., & Geiger, A. (2024). *Mip-Splatting: Alias-free 3D Gaussian Splatting*. IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR 2024). arXiv:2311.16493.
- 从傅里叶频域采样定理出发,严格证明了 3DGS 渲染在相机缩放时的走样机理,并提出了频域低通滤波正则化方案。
- Zwicker, M., Pfister, H., van Baar, J., & Gross, M. (2001). *EWA Splatting*. IEEE Transactions on Visualization and Computer Graphics (TVCG), 8(3), 223-238.
- 建立了利用协方差矩阵 \(\mathbf{J}\mathbf{W}\boldsymbol{\Sigma}\mathbf{W}^\top\mathbf{J}^\top\) 实现椭球投影与频域屏幕低通滤波的经典数学基础。