GitHub又火了一款AI工具 DUSt3R :2张图2秒钟3D 重建

站长之家 2024-03-04 14:24:42新闻资讯
472

一款名为 DUSt3R 的 AI 工具近日在 GitHub 上备受瞩目,其能够在短短2秒钟内通过仅有2张图片完成3D 重建,让许多网友大呼惊奇,甚至认为这比之前热门的 Sora 更加实用。这一工具在单目 / 多视图深度估计以及相对位姿估计任务上表现出色,被认为是目前最先进的技术之一。

DUSt3R.png

作者团队采用了一种全新的方法,称为 DUSt3R,它不需要任何相机校准或视点姿势的先验信息,就能完成任意图像的密集或无约束3D 重建。这意味着用户只需提供图片,无需额外的测量数据,便能轻松获得完整的3D 重建效果。DUSt3R 的网络架构基于标准 Transformer 编码器和解码器,受到 CroCo 的启发,并通过简单的回归损失训练完成。

在实验中,DUSt3R 在多项任务上取得了 SOTA 的成绩,包括绝对姿态估计、多视图姿态回归、单目深度估计和多视图深度估计。不仅如此,DUSt3R 还能够处理两张没有任何重叠内容的图像,仍然准确地完成3D 视图的重建,展现出其强大的功能和适用性。

DUSt3R2.png

该工具的出现引起了许多网友的兴趣,有人甚至在实验中测试了不同相机拍摄的图像,结果依然有效。DUSt3R 的出现为3D 重建任务提供了一种简单而高效的解决方案,让用户可以更轻松地完成相关工作。其优异的性能和快速的重建速度让人对其未来应用前景充满期待。

通过 DUSt3R 这一新工具的出现,用户可以更快速地实现3D 重建,无论是在室内还是室外场景,都能得到准确且完整的效果。这一技术的应用将极大地方便用户进行相关任务,带来更多可能性和创新。

论文地址:https://arxiv.org/abs/2312.14132

项目入口:https://dust3r.europe.naverlabs.com/

AI工具
THE END
站长工具箱
专注软件和工具分享

相关推荐

AiPy:让您用自然语言指挥AI自动写Python代码的开源工具
AiPyApp(简称AiPy)是一款将大型语言模型(LLM)与Python生态深度融合的开源工具,旨在通过自然语言交互实现任务的自动化执行。其核心理念是“需求解析→代码生成→自动执行...
2025-09-02 新闻资讯
685

Matrix-3D:昆仑万维(SkyWork AI)开源的一款融合全景视频生成与3D重建的统一框架
Matrix-3D 是昆仑万维SkyWork AI团队开源的一款融合全景视频生成与3D重建的统一框架,旨在解决传统3D生成技术依赖多视图输入、视角范围受限、几何一致性不足等问题。其核心创...
2025-08-13 新闻资讯
544

AI Sheets:Hugging Face开源的一款创新型零代码数据处理工具
一、AI Sheets是什么AI Sheets 是Hugging Face团队开源的一款创新型零代码数据处理工具,它将大型语言模型(LLM)的强大功能直接引入用户熟悉的电子表格界面,彻底改变了开发者...
2025-08-13 新闻资讯
514

设计师必备的5款AI软件,你居然还没用过?
人工智能技术的飞速发展,为设计师带来了前所未见的高效工具。本文将为你推荐5款必备的AI设计软件,它们不仅能大幅提升工作效率,还能激发无限创意可能。无论你是平面、UI还是...
2025-06-10 电脑知识
983

为什么你的AI工具总出废稿?这3个指令模板快收藏!
“AI生成的内容总是偏离需求”“文案像机器人写的,毫无感染力”“修改次数比自己写还多”……你是否也遇到过类似问题?AI工具并非“废稿制造机”,问题可能出在你的指令上。...
2025-05-10 自媒体
606

微软推出低端平板电脑以推广AI工具 Surface Laptop与Surface Pro瞄准AI应用场景
微软正式推出两款定位中端入门的Surface设备,包括13英寸的Surface Laptop和12英寸的Surface Pro二合一平板电脑,起售价分别为899美元和799美元。这两款产品以“普及AI工具”...
2025-05-07 新闻资讯
525