“工程师的元宇宙”：NVIDIA深度学技术让2D图瞬间“起立”变3D
04-27 18:25鲲鹏计划获奖作者,DeepTech
快系好安全带，你的平面汽车可以随时出发！
GANverse3D 由多伦多的 NVIDIA AI 研究实验室开发，作为 NVIDIA Omniverse 平台的扩展应用，它能将平面图像转换成逼真的 3D 模型，并将其可视化地呈现在虚拟空间中，供人们自由操控。
NVIDIA 利用生成式对抗网络形成训练数据集。这就像摄影师绕着一辆停泊的汽车，从不同的角度拍摄以获得多视角图像一样。这些多视角图像最终会被放入逆向图 （inverse graphics） 的渲染框架中，以此合成 3D 图像。
逆向图指是从 2D 图像推断 3D 网格模型的过程。以前的逆向图模型依赖于 3D 图形作为训练数据，NVIDIA 的 GANverse3D 则是根据真实图像进行训练。NVIDIA 研究员 Jun Gao 表示，以真实图像作为训练基础得到的AI模型，“能更好地推广到现实世界中。”
在没有 3D 要素的帮助下，“我们把 GAN 模型变成了一个非常高效的数据生成器，这样我们就可以基于网络上的任何 2D 图像创建出 3D 对象。”NVIDIA 研究员 Wenzheng Chen 说。
为工程师搭建
元宇宙英伟达 CEO 黄仁勋：“科幻小说中的元宇宙已经近了。”
众多科技公司都在从元宇宙 （Metaverse） 概念中汲取灵感，英伟达也不例外，趁热推出元宇宙的工程师版。
黄仁勋在 2021 GTC 大会上宣布，英伟达要推出 to B 端的实时协作仿真平台 Omniverse ——一个面向企业的虚拟工作平台。
英伟达早在去年 10 月推出 Omniverse 测试版，并在
游戏、建筑等领域得到应用。宝马、
爱立信、沃尔沃、Adobe 等超过超过 17,000 名客户体验了测试版。
黄仁勋在此前的采访中表示， Omniverse 能让游戏开发者轻松应对复杂的流水线工作，以此提升工作效率。在 Omniverse 平台上，动画、纹理、灯光、几何图形等常规游戏制作的流水线工程将能一举打通链接。每个人都能看到他人在做什么，并能做到“眼见为实”。
游戏、架构和设计领域的创作者们高度依赖于虚拟世界，在产品完成之前，他们需要测试和可视化其原型。但仅是渲染一辆汽车、一条街道就需要捕获成百上千的多视角图像，期间会产生大量成本。因此并非每位创作者资源和精力将其绘制的图像转成 3D 模型。
基于此， NVIDIA 开发 GANverse3D 应用，可以迅速追踪实时光线来创造一个真实的虚拟世界。
任何 2D 图像都可以在 Omniverse 中转换成可以自定义和制作动画的 3D 图形。
NVIDIA 深度学工程师 Jean-Francois Lafleche 表示：“Omniverse 让研究人员能够将激动人心的前沿研究直接带给创作者和最终用户。作为 Omniverse 的扩展程序, GANverse3D 将帮助艺术家为游戏开发、城市规划甚至训练新的机器学模型创建更丰富的虚拟世界。”
乔美美么么哒
登录用户ID：
0
评论(11)
收藏
展开
