给3DGS/NeRF新手的球面谐波（SH）极简图解：从‘外星生物’到‘颜色魔法’-深圳市維司達科技有限公司

给3DGS/NeRF新手的球面谐波（SH）极简图解：从‘外星生物’到‘颜色魔法’

想象你手握一个透明水晶球，从不同角度观察时，球内会折射出变幻莫测的彩色光斑。这种视角依赖的颜色魔法，正是球面谐波（Spherical Harmonics）在3D重建领域的核心魅力。本文将用最直观的视觉比喻，带你绕过数学公式的迷雾，直击SH如何成为NeRF和3D高斯泼溅（3DGS）中的"色彩指挥家"。

1. 当外星生物遇见调色盘：SH的两种视觉密码

初次接触球面谐波的人，常被其数学定义中的复杂符号吓退。但如果我们换用两种截然不同的视觉呈现方式，理解门槛将瞬间降低。

1.1 外星生物形态：基函数的原始样貌

在科研论文中常见的SH基函数可视化（如图3），看起来像是一组漂浮在太空中的荧光水母：

第0阶：一个完美对称的球形，如同单细胞生物
第1阶：三个互相垂直的"触手"，像三足外星探测器
第2阶：六瓣对称结构，让人联想到深海放射虫

这些奇异形状其实是数学家在球坐标系中设计的特殊振动模式。就像不同的乐器音色可以组合成复杂交响乐，这些"外星生物"也能叠加出任意球面函数。

1.2 色彩编码模式：工程师的实用视图

切换到图4的色温表示法，SH突然变得亲切起来：

# 伪代码示例：用HSV色轮表示SH基函数 def visualize_SH(l, m): hue = (math.atan2(m, l) + π) / (2π) # 方向决定色相 saturation = abs(m / l) # 阶数比决定饱和度 value = 1.0 - 0.1 * l # 阶数决定明度 return hsv_to_rgb(hue, saturation, value)

这种表示法直接揭示了SH在3D重建中的本质——角度依赖的颜色编码器。当3DGS中的高斯球需要根据视角改变颜色时，SH系数就是它的动态调色盘。

SH阶数	基函数数量	适合场景	存储开销（RGB）
1阶	4个	粗糙的漫反射表面	12个float
2阶	9个	常见材质（默认选择）	27个float
3阶	16个	精细的镜面反射	48个float

提示：3DGS默认使用3阶SH并非偶然——它能在细节表现和计算开销间取得最佳平衡

2. 从极坐标到色彩空间：SH的魔法转换原理

为什么球坐标系特别适合处理视角相关的颜色变化？想象你站在梵高的《星空》前：

正面观看：能清晰分辨笔触的走向
侧面观看：主要看到画布纹理和颜料厚度
俯视观看：可能发现隐藏的色彩层次

这种观察角度与视觉特征的对应关系，正是SH要捕捉的本质。

2.1 极坐标的天然优势

传统XYZ坐标擅长描述位置，但处理方向时就像用螺丝刀吃牛排。球坐标(θ,φ)则如同专业的餐具：

# 将观察方向转换为球坐标 def dir_to_spherical(view_dir): theta = math.acos(view_dir.z) # 天顶角 phi = math.atan2(view_dir.y, view_dir.x) # 方位角 return theta, phi

SH基函数就是专门为这个"餐具"设计的"菜谱"，确保每个角度都能获得正确的"风味"（颜色）。

2.2 颜色魔法的实现步骤

采集阶段：从多个角度拍摄物体的色彩样本
拟合阶段：计算使SH组合最接近实际观测的系数
渲染阶段：实时根据视角选取对应的SH组合

这个过程就像训练一位色彩魔术师：

先展示各种角度下的颜色变化（训练数据）
然后让魔术师记住调色配方（SH系数）
最后无论观众坐在哪里，都能看到正确的颜色效果（实时渲染）

3. SH在3D重建中的实战技巧

理解了SH的视觉原理后，让我们看看现代3D系统如何实际运用这个工具。

3.1 NeRF中的SH革新

传统NeRF用MLP直接预测颜色，如同让神经网络死记硬背每个角度的色彩。引入SH后：

# 伪代码：SH颜色预测 vs 原始NeRF def nerf_color(x, d): # 原始方法 return mlp(torch.cat([x, d])) # 混合输入位置和方向 def sh_color(x, k, d): # SH增强版 sh_basis = compute_SH_basis(d) # 计算当前方向的基函数值 return torch.sum(k * sh_basis, dim=-1) # 系数加权求和

这种改进使得网络只需学习静态的SH系数场，而视角计算交给轻量的SH公式，大幅提升训练效率。

3.2 3DGS的SH妙用

3D高斯泼溅将SH的效能发挥到新高度：

每个高斯球携带自己的SH系数集
渲染时根据像素视角动态混合相邻高斯的SH贡献
通过球谐旋转实现高效的光照变化模拟

注意：3阶SH（16个基）之所以成为3DGS默认选择，是因为它能准确表达大多数材质的各向异性反射，又不会像更高阶数那样引发带状伪影

4. 超越颜色：SH的隐藏潜力

虽然本文聚焦颜色编码，但SH的魔法远不止于此。在高级3D应用中，它还能：

4.1 光照传输模拟

SH可以紧凑地表示环境光照，实现实时的全局光照效果。例如：

漫反射光照：用2阶SH编码环境立方体贴图
镜面反射：结合SH卷积实现近似镜面响应

4.2 体积材质建模

通过扩展SH到更多维度，可以表示：

次表面散射：用SH模拟光线在材质内部的扩散
各向异性反射：不同视角下变化的粗糙度

# 示例：用SH控制材质属性 def eval_material(view_dir, sh_coeffs): basis = compute_SH_basis(view_dir) metallic = dot(sh_coeffs.metallic, basis) roughness = dot(sh_coeffs.roughness, basis) return Material(metallic, roughness)