1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议

标题:浙大团队提出“体素对齐”,革新前馈3D高斯泼溅方法

正文:
在三维重建技术快速发展的今天,前馈式3D Gaussian Splatting(Feed-Forward 3DGS)正成为产业化的热点。然而,现有方法多采用“像素对齐”策略,将2D像素映射到3D高斯,存在两大问题:二维特征难以在三维中精确对齐,且高斯数量受限于像素网格,无法智能分配。

浙大团队提出的VolSplat框架创新性地采用“体素对齐”策略,在三维空间中融合多视角信息,从根本上解决了上述难题。实验表明,VolSplat在RealEstate10K和ScanNet等数据集上的视觉质量和几何一致性均优于传统方法,同时展现出强大的跨数据集泛化能力。

VolSplat的核心思路是将“对齐”从二维提升到三维。通过每视图预测的深度图,将2D特征反投影并聚合到统一的三维体素网格中,再利用稀疏3D U-Net进行多尺度特征细化与高斯参数回归。这一方法带来了四大优势:
1. 跨视图一致性增强:信息在三维空间中融合,避免了2D特征匹配的不稳定性;
2. 高斯密度动态分配:复杂区域高密度、平坦区域低密度,资源分配更高效;
3. 几何一致性更强:减少浮空伪影和几何畸变,细节表现更清晰;
4. 易与外部3D信号融合:深度图、点云等可自然融入流程,无需复杂操作。

VolSplat的整体流程分为三步:
1. 2D特征提取与深度估计:使用共享编码器提取图像特征,并生成稠密深度图;
2. 像素到体素转换:将像素反投影到三维空间,离散化为体素并聚合特征;
3. 稀疏3D细化与高斯回归:通过3D U-Net优化体素特征,并在占据体素上回归高斯参数。

实验结果显示,VolSplat在边缘、细节和复杂几何处理上表现出色,尤其在未见过的数据集上仍保持高性能(如ACID数据集PSNR达32.65dB)。其成果可广泛应用于虚拟看房、机器人感知、AR/VR等领域,为三维重建研究提供了新方向。

论文链接:https://arxiv.org/abs/2509.19297
项目主页:https://lhmd.top/volsplat

原文链接
本文链接:https://kx.umi6.com/article/26072.html
转载请注明文章出处
分享至
打开微信扫一扫
内容投诉
生成图片
相关推荐
换一换
前馈3D高斯泼溅新方法,浙大团队提出“体素对齐”,直接在三维空间融合多视角2D信息
2025-09-29 17:11:46
DeepMind CEO:对OpenAI引入广告感到惊讶 Gemini目前没这种计划
2026-01-23 15:00:51
vivo暂缓AI眼镜项目
2026-01-23 09:43:53
上海市新增8款已完成登记的生成式人工智能服务
2026-01-23 15:02:58
苏州“十五五”规划建议:推进人工智能驱动的新型科研范式、技术研发、工程实现、产品落地一体化协同发展 积极部署人工智能芯片、量子等创新应用技术
2026-01-21 20:27:59
34GB大礼包 AMD显卡AI生产力来了:ComfyUI等5大软件一键部署
2026-01-22 23:17:29
中信证券:建议当前核心围绕先进封装和存储封装环节进行布局
2026-01-23 08:40:41
2.4万亿参数“最强文科生”,文心5.0正式版,你挺懂山东人啊?
2026-01-23 22:15:24
成都国资开年「闪击战」背后的产业野望
2026-01-21 20:24:37
融捷股份等成立新公司 含多项AI业务
2026-01-22 15:00:25
马斯克与OpenAI的恩怨情仇
2026-01-23 22:18:50
大学开始用AI招生了
2026-01-22 15:58:41
马斯克:美国AI发展遭电力卡脖 中国电力增长十分惊人
2026-01-23 18:08:20
24小时热文
更多
扫一扫体验小程序