眼爆科技

英伟达首次利用AI自动生成电子游戏视频画面

时间:2018-12-06 12:30  编辑:眼爆科技

如果只是作为驾驶模拟器,可能很平庸,但对电子游戏画面来说,这可能是一场伟大的革命 。

图|真实视频(左)和AI生成的渲染视频(右)之间的对比。(图源:英伟达)

最近人工智能的繁荣给图像和视频生成领域带来了一系列令人印象深刻的成果。最新成果来自芯片制造商英伟达,该公司12月3日发布了一份研究报告,展示了AI生成的画面如何与传统的视频游戏引擎相结合。这种混合图形系统有望应用到视频游戏,电影和虚拟现实等方面。

这是使用深度学习渲染视频内容的一种新方式,英伟达应用深度学习副总裁Bryan Catanzaro表示。显然,英伟达非常关心图形生成,并且我们正在思考如何利用人工智能彻底改变这一领域。

英伟达的生成的图片并没有达到真实照片级的画面,他们展示了在 AI 生成的图像中发现的一些水印状的模糊。并且这一工作也不是完全创新的。在一篇研究论文中,该公司的工程师解释了他们如何基于一些现有方法,包括一个有影响力的开源系统pix2pix。此外英伟达的工作中还应用到了生成对抗网络(GAN)。这些方法已经广泛用于AI图像生成。

但是英伟达还是在新产品中引入很多创新,这是世界上首个利用AI生成图形画面的视频游戏演示。这个产品是一个简单的驾驶模拟器,玩家可以在AI生成的几个城市街区中穿行,但不能离开他们的汽车,也不能以其他方式与世界互动。并且这一演示仅使用一个GPU即可实现 ,对于这样的前沿工作来说,这是一个显著的成就。

英伟达的系统利用如下几个步骤生成图形画面:首先,研究人员必须收集训练数据,一般这些数据来自于自动驾驶研究的开源数据集。然后将这些视频数据中的每一个镜头做分割,即每一帧画面被分成不同类别的区域:如天空,汽车,树木,道路,建筑物等。然后,用这些分割的数据训练生成对抗网络,用来生成这些对象的新画面 。

接下来,工程师们使用传统的游戏引擎创建了虚拟环境的基本拓扑结构。在该游戏演示中,使用的系统是虚幻引擎 4,这是一种流行的引擎,被用于诸如堡垒之夜,绝地求生,战争机器4等多种游戏中。工程师们使用此引擎作为框架,然后利用深度学习算法实时生成每个类别的图形画面,并将它们显示到游戏引擎的模型上 。

被创造的世界的结构还是用传统方法制作的,Catanzaro解释说,人工智能产生的唯一东西就是图形画面。他补充说,演示本身很基础,主要由一名工程师负责完成。这主要是用来做概念验证游戏,而不是开发了一个真正的游戏 。

  • 共3页:
  • 上一页
  • 1
  • 2
  • 3
  • 下一页




  • 上一篇:R2.ai强势出击 推出升级版AutoML R2 Learn 下一篇:AI“写”文章 著作权到底是谁的?