Google的研究人员团队对所有热门旅游景点的照片都进行了非常出色的使用。他们创建了一种算法,可以拍摄这些照片并将其转换为逼真的非常详细的3D渲染。最棒的是,它甚至可以编辑出干扰的物体,甚至可以消除照明的变化。
研究人员使用了数千张照片来训练算法来识别物体。这些照片从许多不同角度显示了对象,这就是系统以后如何创建3D的方式。但是,拍摄这些照片时还有各种照明条件和一天中的不同时间。照片中通常还会有障碍物,例如人,汽车或标志。就像您可能想像的那样,人们还对照片应用了多种不同的编辑技术。但是令人印象深刻的是,这项技术能够将它们全部消除,并创建一个3D渲染,看起来像它带您进入了整个场景。
该系统被命名为“野外的NeRF”或简称为NeRF-W。这是因为团队解释说,用于地标3D重建的系统是由不受约束的“野生”照片集制成的。结果令人印象深刻,特别是考虑到系统创建平滑和统一的渲染所必须克服的所有挑战。
研究人员表示,该系统可能存在AR和VR的各种应用程序。我相信它也可以用于视频游戏和电影的特殊效果。也许也适用于虚拟旅行,这将特别有用,因为现在我们无法在任何地方旅行。
如果您想阅读全文,可以在这里找到。您也可以在上面的视频中或通过此链接看到一些示例。
[NeRF-W通过PetaPixel]