广告也精彩

LucidDreamer 官网简介:

LucidDreamer基于人工智能技术,特别是深度学习和计算机视觉技术,实现了从2D图像到3D场景的生成。

LucidDreamer

内容摘要

随着虚拟现实设备和内容的广泛应用,对三维场景生成技术的需求日益增长。然而,现有的三维场景生成模型将目标场景限制在特定领域,这主要是由于其训练策略使用的三维扫描数据集与真实世界相去甚远。为了解决这种局限性,我们提出了 LucidDreamer,它是一种无域场景生成管道,充分利用了现有基于大规模扩散的生成模型的强大功能。

我们的 LucidDreamer 有两个交替步骤: 做梦和对齐。首先,为了根据输入生成多视角一致的图像,我们将点云设定为每次图像生成的几何准则。具体来说,我们将点云的一部分投影到所需的视图上,并将投影作为使用生成模型进行内绘的指导。内绘图像通过估计的深度图提升到三维空间,形成新的点。其次,为了将新的点聚合到三维场景中,我们提出了一种对齐算法,它能和谐地整合新生成的三维场景的各个部分。最终获得的三维场景可作为优化高斯拼接的初始点。与之前的三维场景生成方法相比,LucidDreamer 生成的高斯拼接图精细度很高,而且不受目标场景域的限制。

关于LucidDreamer免责声明

本站AI工具集 | 人工智能工具箱收录的LucidDreamer官网链接来源于网络,不保证其链接的准确性和完整性,同时,在2024年1月10日 下午2:38收录时,该网站上的内容,都属于合规合法,后期LucidDreamer网站的内容如出现违规,可以直接联系网站管理员进行删除,AI工具集 | 人工智能工具箱不承担任何责任。

相关导航

广告也精彩

暂无评论

暂无评论...