2D图片转换为3D图片,Nvidia推出照片AI建模 GANverse3D

  • 467 views

不知道大家有没有记得哆啦A梦有个道具”立体日光相机(实物立体日光写真)”,只要按下快门,

就可以从印出的照片中倒出一个被拍摄物的等身大3D复印来,

”立体日光相机”虽然还未被发明,随着科技发展,”将拍摄的照片转为3D”的技术却确实登场了─

从iThome看到的报导,Nvidia日前发表了新的深度学习引擎”GANverse3D”,

该应用程序不但只需单张2D图像就可创建出相对应的3D模型,

其所产生的模型更不仅仅只是一块形状而已,甚至还包括了基本的对象分割!

 

(以下内容引述自iThome)

…..Nvidia开发了一种新的深度学习引擎GANverse3D,可以将标准的2D图像,转换成3D物体模型,

并且作为虚拟协作模拟平台Nvidia Omniverse的扩充套件使用,将3D模型渲染成光影逼真的样子…..

…..Nvidia人工智能实验室所开发的GANverse3D应用程序,能将平面的图像转成逼真的3D模型,

并在虚拟环境进行可视化与操作控制,官方提到,这项功能可以让建筑师、创作者、

游戏开发者和设计师,在不需具备3D建模的专业知识下,简单地将对象加到3D场景中。

像是使用单张汽车照片,就可以创建出3D模型,该模型可以在虚拟场景中行驶,

并且配备逼真的前灯、尾灯和方向灯等配备…..

…..在开发GANverse3D的过程,由于缺乏训练数据,

于是研究人员便将生成对抗网络(GAN)转变成为高效能的数据产生器,用来生成同一物体,

但是由不同方向观看的图片,这些图片就像是摄影师绕着车辆,从不同角度拍摄的一样…..

…..这些多重视角的图片,被插入到反转图像(Inverse Graphics)用的渲染框架中,

在经过这些图片训练后,GANverse3D只需要单张2D图像就可快速创建出3D模型,

这些模型可以被用于3D神经渲染器上,供开发人员控制自定义对象和变换背景…..

…..

2D图片转换为3D图片,Nvidia推出照片AI建模 GANverse3D

只是该工具的输出到底是奠基于多重的材料训练,文中提到的车子、马或建筑可能还好,

若使用者提供的是根本不可能存在多重角度的素材,例如立ち絵或自行绘制的2D人物图样,

GANverse3D或许就很难依此产生出(符合想象的)3D美少女人物模型呢?

嗯,即便能节省建模时间已是一大福音,想要打破二次元与三次元之间的藩篱…..只怕仍是力有未逮哪 XD

  • 本文由 发表于 2021/05/0117:01:58

发表评论

匿名网友 填写信息