nVIDIA|NVIDIA演示Instant NeRF:数秒内将2D照片合成为3D场景

NVIDIA 最新的 AI 演示给人留下了很深的印象:该工具可以将数十张 2D 快照渲染成为 3D 场景 。在视频中写道,75 年前宝利来(Polaroid)实现了照片在几分钟内成像,而现在 NVIDIA 能够在几秒内让 2D 照片合成 3D 场景 。
访问购买页面:
京东NVIDIA系列商品汇总

【nVIDIA|NVIDIA演示Instant NeRF:数秒内将2D照片合成为3D场景】nVIDIA|NVIDIA演示Instant NeRF:数秒内将2D照片合成为3D场景
文章图片

正如你在下面动图中所看到的,一个穿着像安迪·沃霍尔(Andy Warhol)的模特拿着一个老式的宝丽来相机 。该工具被称为Instant NeRF,指的是"神经辐射场"--由加州大学伯克利分校、Google研究院和加州大学圣地亚哥分校的研究人员在2020年开发的一项技术 。
如果你想要一个关于神经辐射场的详细解释,你可以在这里阅读 。但简而言之,该方法映射了不同 2D 镜头的颜色和光线强度,然后生成数据,将这些来自不同有利位置的图像连接起来,渲染出一个完成的3D场景 。除了图像之外,该系统还需要关于摄像机位置的数据 。
几年来,研究人员一直在改进这种从2D到3D的模型,为成品渲染增加更多细节,并提高渲染速度 。NVIDIA表示,其新的Instant NeRF模型是迄今为止开发的最快的模型之一,将渲染时间从几分钟缩短到“几乎瞬间”完成的过程 。
NVIDIA的Isha Salian写道:“Instant NeRF可用于为虚拟世界创建头像或场景,以3D方式捕捉视频会议参与者及其环境,或者为3D数字地图重建场景 。"这项技术可用于训练机器人和自动驾驶汽车,通过捕捉现实世界物体的二维图像或视频片段来了解它们的大小和形状 。它还可以用于建筑和娱乐业,快速生成真实环境的数字代表,创作者可以在此基础上进行修改和构建” 。

    推荐阅读