Stability AI推出SPAR3D 实现0.7秒单图实时3D重建

快速阅读: 据相关媒体报道，Stability-AI推出SPAR3D，实现单图3D重建重大突破，0.7秒生成高精度三维模型。融合回归与生成方法，提升速度与准确性，在多个数据集表现优异，具广泛应用前景。

近日，著名开源大模型平台Stability-AI推出了一款名为SPAR3D的创新模型，实现了单图像3D重建技术的重大突破。该技术能在0.7秒内从二维图像中恢复出三维物体的形状和结构，为行业带来了巨大变革。

单图像3D重建面临诸多挑战，主要技术路径包括基于回归的方法和生成式建模的方法。前者在推断可见表面时效率较高，但处理遮挡区域时容易出现误差；后者能更好应对不确定性区域，但计算成本高且生成结果与可见表面对齐效果不佳。

SPAR3D通过融合这两种技术的优势，有效克服了各自的局限，大幅提升了重建速度和精度。其架构分为两个主要阶段：点采样阶段和网格化阶段。点采样阶段利用点扩散模型生成稀疏点云，包含XYZ坐标和RGB颜色信息；网格化阶段则从图像和点云中生成带有纹理的三维网格。

在GSO和OmniObject3D数据集的测试中，SPAR3D在多个评估指标上显著优于传统方法，如GSO数据集中的CD值为0.120，FS@0.1为0.584，PSNR为18.6；OmniObject3D数据集中，CD值为0.122，FS@0.1为0.587，PSNR为17.9。这表明SPAR3D在几何形状和纹理质量方面表现出色，具有广泛的应用前景。

随着技术的进步和应用场景的拓展，SPAR3D将在计算机视觉和3D重建领域发挥重要作用。其开源特性也为开发者和研究者提供了更多创新与应用的机会。

(以上内容均由AI生成)