NVIDIA AI 研究团队再推 2D 转 3D 应用 GANverse 3D ,把霹雳游侠伙计的照片重造为 3D 模型

NVIDIA 的 AI 研究团队近年公布许多有趣的应用,除了已经陆续被应用在多款知名大作的 DLSS 影像增强技术,或把一般 60fps 短片强化为流畅的高速慢动作影片,像是可把随手画出的线条转为艺术作品的 GauGAN ,或是分析游戏影片

NVIDIA 的 AI 研究团队近年公布许多有趣的应用,除了已经陆续被应用在多款知名大作的 DLSS 影像增强技术,或把一般 60fps 短片强化为流畅的高速慢动作影片,像是可把随手画出的线条转为艺术作品的 GauGAN ,或是分析游戏影片在不利用任何游戏引擎的前提把经典游戏小精灵重新製作的 GameGAN ,此次在 GTC 大会, NVIDIA AI 研究团队再度推出 2D 影像转化为 3D 模型的 GANverse 3D ,同时将上个世纪末经典科幻影集霹雳游侠当中的”伙计” KITT 以 GANverse 3D 进行重塑,并使这辆新伙计在 NVIDIA Omniverse 的世界奔驰。

照片中提到了File Edit Create Animation Window Rendering Testing OmniGraph Animation Help、CACHE: ON LIVE SYNC: OFF、Viewport,包含了屏幕截图、摩托车、汽车设计、2008宝马M、软件

▲透过先把多角度的照片贴到 3D 网格模型上,再使 AI 模型尝试以一张 2D 图完成完整的 3D 网格模型

GANverse 3D 是一套透过对抗生成网络技术的 AI 应用,藉由学习将单张平面 2D 影像转化为 3D 模型的方式,使建筑师、创作者、游戏开发者、设计师等能够在没有 3D 建模的专业知识,也能以手边的照片与图片产生简单 3D 模型。而这次 NVIDIA 则选择以汽车作为示範,不过藉由置换学习的影像内容, GANverse 3D 也能学习产生其他内容的 3D 模型,虽然现在产生的结果与原始的物件不见得相同,但毕竟这是一套能持续学习强化的 AI ,随着时间与素材增加,效果也会越来越好。

以车辆为例, GANverse 3D 的模型的训练方式是透过自不同角度拍摄车辆的照片,让 AI 学习如何把这些影像贴到 3D 模型上,而后再使 AI 尝试自一张 2D 汽车照片产生 3D 网格模型。

照片中包含了光、汽车、中型车、紧凑型车、摩托车

▲虽然与真正的伙计外观不尽相同,不过也抓到些许神韵

此次也在取得霹雳游侠 Knight Rider 官方授权下,以伙计 KITT 的 2D 影像产生全新的 3D 模型,而后藉由 NVIDIA Omniverse 、 NVIDIA PhysX 工具把预测的纹理贴图转换为高品质素材,产生继相似却又有所不同的新生伙计。

NVIDIA 发表自我调整判别器增强技术,使 AI 以较少影像数量训练可产生越级成果

NVIDIA Research 探索 AI 与影像的未来, GauGAN 诠释 AI 如何将影像分析反推为涂鸦成画

NVIDIA 让 AI 看过 5 万局小精灵游玩影片,然后从无到有重製一套完整的小精灵游戏

原创文章,作者:甜可芯,如若转载,请注明出处:https://www.53moban.com/8423.html

联系我们

400-800-8888

在线咨询:点击这里给我发消息

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息