LighthouseGS是一种基于3D高斯泼溅技术的实用新颖视图合成框架。该框架旨在利用单一移动设备进行的简单全景式拍摄,生成高质量的室内场景渲染。这种以旋转为主、基线狭窄的运动方式,在纹理较少的室内环境中,给精确的相机姿态估计和三维点云重建带来了显著挑战。
为应对这些挑战,LighthouseGS利用了粗略的几何先验信息,例如移动设备相机姿态和单目深度估计,并重点利用了室内常见的平面结构。具体而言,研究团队提出了一种名为“平面支架组装”的新初始化方法,旨在这些平面结构上生成一致的三维点。随后,采用一种稳定的剪枝策略,以增强几何结构的准确性和优化过程的稳定性。
此外,该框架还引入了几何与光度校正技术,以解决移动设备拍摄中因运动漂移和自动曝光所导致的不一致问题。通过在真实与合成的室内场景上进行测试,LighthouseGS能够实现逼真的渲染效果。据称,其性能优于现有先进方法,并支持全景视图合成和物体放置等应用。该研究已被相关学术会议接收。


