近日,由我中心王志成副研究员指导的2022级研究生王楠,其撰写的论文“Semantic-Guided Gaussian Splatting with Deferred Rendering”成功被 IEEE International Conference on Acoustics, Speech, and Signal Processing(ICASSP)2025 录用。王楠同学担任第一作者,王志成副研究员则为通讯作者。
该论文聚焦于前沿的 3D 高斯溅射(3DGS)技术,并在此基础上展开了创新性探索,以解决反射非朗伯表面的精确逆渲染问题,提升渲染和重建质量。3DGS 在实时渲染方面表现出色,但在处理反射表面时存在不足,导致渲染不一致和物体形状重建不准确。为此,论文提出语义引导高斯溅射(SGGS)方法。该方法为每个高斯关联表示材料特征的参数,在 2D 基础模型的引导下提取语义特征场;构建隐式材料字典,明确建模材料属性;采用多视图和法线几何一致性建模策略,确保几何和外观的一致性;通过延迟着色生成最终像素颜色。
SGGS的创新点主要体现在:一是利用2D基础模型的语义特征,为高斯表示引入物体语义先验信息,有效处理反射表面;二是显式参数化材料特征,更准确地表示物体固有特性;三是结合几何和多视图正则化方法,提高法线质量,增强外观和几何一致性,使渲染参数与 3D高斯真实几何相关联。实验结果表明,SGGS在渲染质量和几何重建方面优于现有方法,推动了反射和一般物体的渲染与重建技术发展。
ICASSP会议,它作为国际声学、语音与信号处理会议(International Conference on Acoustics, Speech and Signal Processing),是IEEE信号处理学会(Signal Processing Society)的旗舰学术年会,在全球声学、语音和信号处理及其应用领域占据着举足轻重的地位,是规模最大、涵盖内容最全面的国际会议。
此次王楠同学论文的成功录用,无疑彰显了我中心在相关学术研究领域的扎实功底与创新能力,也期待未来能有更多这样的优秀成果涌现。