建模师的好消息or失业？黄仁勋的英伟达推出视频建模AI！

你有没有想过！如果你用手机拍了一个视频，就能把视频里的东西变成 3D 模型！你可以把模型放到电脑里看，甚至还能玩？这听起来是不是很酷？！

其实，这已经不是梦想了，因为英伟达公司出了一款神奇的 AI，它就能做到这些。它叫 Neuralangelo，它可以把视频变成 3D 模型，还带有颜色和细节。Neuralangelo 的厉害之处在于，它可以很准确地显示复杂的材料，比如瓦片、玻璃、大理石等；而且它可以很简单地用手机拍的视频就做出逼真的东西，并放到我们自己的项目里。

Neuralangelo 模型是什么？

Neuralangelo 模型是一种基于深度学习的 3D 重建技术，它可以从不同角度拍摄的物品的视频中，生成创作者们所需要的具备贴图和细节的 3D 模型。

Neuralangelo 模型采用了即时神经绘图（instant neural graphics primitives）的方法，并利用了英伟达自家的 Instant NeRF 技术，因此即使是对于低对比度或动态变化的视频，也可以从中捕捉到微妙的细节，并转换为更具备商业价值的 3D 模型。

Neuralangelo 模型的独到之处主要表现在其“准确性”与“普适性”：

“准确性”即该模型可以准确呈现复杂材料的质地，例如屋顶瓦片、玻璃窗格和光滑的大理石；

“普适性”即创作者们能够简单使用智能手机拍摄的影片素材，即可创作出逼真的物件，并将其整合到他们的项目中。

Neuralangelo 模型有什么用？

Neuralangelo 模型提供的 3D 重建能力将给创作者带来巨大好处，帮助他们在数字世界中重建真实世界。这个工具最终将使开发人员能够将精细的物体——不论是小型雕像，还是大型建筑——导入视频游戏或工业数字孪生（digital twin）的虚拟环境中。

Neuralangelo 模型也可以用于增强现实（AR）和虚拟现实（VR）等领域，让用户能够在沉浸式的体验中感受到真实世界的物品和场景。

Neuralangelo 模型还可以用于教育、文化、旅游等领域，让用户能够通过视频观看和互动，了解和欣赏不同地方和时代的历史文物和名胜古迹。

Neuralangelo 模型如何工作？

Neuralangelo 模型利用从不同角度拍摄的物品的视频作为输入素材，来生成创作者们所需要的模型。一旦 Neuralangelo 确定了视频中相机的运动规律，它就会生成模型的 3D 轮廓，并开始在上面雕刻出细节。

Neuralangelo 模型的核心是 Instant NeRF 技术，它是一种基于神经辐射场（neural radiance field）的方法，可以从稀疏的图像中重建出连续的 3D 场景。Instant NeRF 技术可以实时地对输入图像进行编码和解码，生成出具有光照和遮挡效果的 3D 模型。

Neuralangelo 模型还使用了即时神经绘图（instant neural graphics primitives）的方法，它是一种基于神经网络的图形学技术，可以从输入图像中提取出几何、纹理、光照等信息，并将其组合成为 3D 模型。即时神经绘图的方法可以有效地处理复杂材料的质地，例如反射、折射、透明等效果。

Neuralangelo 模型有哪些展示？

英伟达预计将在 6 月 18 日至 22 日举行的电脑视觉与样式辨识（Computer Vision and Pattern Recognition，CVPR）大会上发布 Neuralangelo 模型。

在内部演示中，英伟达展示了 Neuralangelo 模型重建的米开朗基罗著名雕刻作品《大卫》、英伟达位于湾区的办公室、及平板拖车等日常见到的物品的 3D 还原模型。

Neuralangelo 模型有哪些局限？

Neuralangelo 模型虽然具有很多优点，但也有一些局限和挑战。例如：

Neuralangelo 模型目前只能处理静态的物体，不能处理动态变化或运动的物体；

Neuralangelo 模型目前只能处理单个物体，不能处理多个物体或复杂场景

Neuralangelo 模型目前只能从视频中生成 3D 模型，不能从单张图片或其他媒体中生成

Neuralangelo 模型目前还没有公开源代码或数据集，不能让其他研究者或开发者复现或改进。

结束语

感谢大家阅读我们的文章，希望你们能够对 Neuralangelo 模型有一个初步的了解和兴趣。欢迎你在评论区留言，分享你对 Neuralangelo 模型的看法和想法。再次感谢你的支持，我们下期再见！