DUSt3R

2年前发布 1.6K 00

工具介绍:DUSt3R是由法国纳威尔实验室(Naver Labs Europe)的研究者们开发的,它是一款基于深度学习的3D重建工具,它的特点是可以处理任意的图像集合,无论是单张、两张还是多张,无论是同一视角还是不同视角,无论是有相机参数还是没有相机参数,都可以在短短几秒钟内,生成场景的三维模型,而且还可以同时输出深度信息、像素匹配、相对和绝对相机...

收录时间:
2024-03-22

DUSt3R简介

DUSt3R是由法国纳威尔实验室(Naver Labs Europe)的研究者们开发的,它是一款基于深度学习的3D重建工具,它的特点是可以处理任意的图像集合,无论是单张、两张还是多张,无论是同一视角还是不同视角,无论是有相机参数还是没有相机参数,都可以在短短几秒钟内,生成场景的三维模型,而且还可以同时输出深度信息、像素匹配、相对和绝对相机姿态等多种任务的结果。

DUSt3R

DUSt3R的原理是使用了一种新颖的点图回归方法,以及基于Transformer的编码器和解码器,来学习从像素到三维空间的映射。点图回归方法是指将每个像素的三维坐标作为回归目标,而不是像传统的MVS方法那样,将深度值作为回归目标。这使得DUSt3R能够更准确地从图像中恢复出三维信息。

此外,DUSt3R还能够处理两张没有任何重叠内容的图像,仍然准确地完成3D视图的重建,展现出其强大的功能和适用性。它在多项任务上取得了SOTA的成绩,包括绝对姿态估计、多视图姿态回归、单目深度估计和多视图深度估计。

DUSt3R的出现为3D重建任务提供了一种简单而高效的解决方案,让用户可以更轻松地完成相关工作。无论是在室内还是室外场景,都能得到准确且完整的效果。因此,DUSt3R在计算机视觉、计算机图形学、医学影像处理、建筑和文物保护等领域都有广泛的应用前景。

DUSt3R – 2秒钟用图片生成3D模型实测视频展示:

关于DUSt3R特别声明

本站新媒派提供的DUSt3R内容都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由新媒派实际控制,在2024年3月22日 下午2:21收录时,该网页上的内容,都属于合规合法,后期网页的内容如有出现违规,可以直接联系网站管理员进行删除,新媒派不承担任何责任。

相关导航

AskNova

AskNova

AskNova是一款基于天文制图(Astrocartography) 的在线占星工具,能够将你的出生信息转化为一张互动的世界地图,展示不同地点是如何对您的事业、爱情与生活的影响。AskNova 结合 NASA 行星数据和专业占星家提供的解释,在精确至世界一英里以内(或更远),还考虑到了时区、夏令时和过去的日历变化,并提供全球范围内的占星洞察信息。支持搬迁图、国家探索器、AI 占星解读及高级 PDF 报告。

暂无评论

您必须登录才能参与评论!
立即登录
none
暂无评论...