DUSt3R

2年前发布 1.6K 00

工具介绍:DUSt3R是由法国纳威尔实验室(Naver Labs Europe)的研究者们开发的,它是一款基于深度学习的3D重建工具,它的特点是可以处理任意的图像集合,无论是单张、两张还是多张,无论是同一视角还是不同视角,无论是有相机参数还是没有相机参数,都可以在短短几秒钟内,生成场景的三维模型,而且还可以同时输出深度信息、像素匹配、相对和绝对相机...

收录时间:
2024-03-22

DUSt3R简介

DUSt3R是由法国纳威尔实验室(Naver Labs Europe)的研究者们开发的,它是一款基于深度学习的3D重建工具,它的特点是可以处理任意的图像集合,无论是单张、两张还是多张,无论是同一视角还是不同视角,无论是有相机参数还是没有相机参数,都可以在短短几秒钟内,生成场景的三维模型,而且还可以同时输出深度信息、像素匹配、相对和绝对相机姿态等多种任务的结果。

DUSt3R

DUSt3R的原理是使用了一种新颖的点图回归方法,以及基于Transformer的编码器和解码器,来学习从像素到三维空间的映射。点图回归方法是指将每个像素的三维坐标作为回归目标,而不是像传统的MVS方法那样,将深度值作为回归目标。这使得DUSt3R能够更准确地从图像中恢复出三维信息。

此外,DUSt3R还能够处理两张没有任何重叠内容的图像,仍然准确地完成3D视图的重建,展现出其强大的功能和适用性。它在多项任务上取得了SOTA的成绩,包括绝对姿态估计、多视图姿态回归、单目深度估计和多视图深度估计。

DUSt3R的出现为3D重建任务提供了一种简单而高效的解决方案,让用户可以更轻松地完成相关工作。无论是在室内还是室外场景,都能得到准确且完整的效果。因此,DUSt3R在计算机视觉、计算机图形学、医学影像处理、建筑和文物保护等领域都有广泛的应用前景。

DUSt3R – 2秒钟用图片生成3D模型实测视频展示:

关于DUSt3R特别声明

本站新媒派提供的DUSt3R内容都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由新媒派实际控制,在2024年3月22日 下午2:21收录时,该网页上的内容,都属于合规合法,后期网页的内容如有出现违规,可以直接联系网站管理员进行删除,新媒派不承担任何责任。

与DUSt3R相关工具

Artefacts.ai

Artefacts.ai

Artefacts.ai 是一个先进的 3D AI 工具包,允许用户将文本或 2D 图像轻松转换为 3D 资产。这个平台利用先进的人工智能算法,能够快速准确地生成高质量的 3D 模型,大大减少了传统 3D 建模所需的时间和精力。用户可以上传图像或描述,AI 会在几秒钟内生成预览模型,供用户审查和下载。它适用于各种规模的工作室、独立创作者甚至初学者,帮助他们快速创建高质量的 3D 模型和商品。

暂无评论

您必须登录才能参与评论!
立即登录
none
暂无评论...