比AI视频换脸还可怕！DeepMind新AI可生成逼真视频

来源 |VentureBeat，由捷猫快讯整理编辑，文中观点不代表本网站立场，仅供参考

快讯，近日，DeepMind的研究人员研发了一个名叫Dual Video Discriminator GAN（DVD-GAN）的人工智能模型，该模型通过能够通过学习一系列的YouTube视频数据集，生成高度逼真且连贯的256 x 256像素视频，最长可达48帧。

目前，DVD-GAN的研究成果已于美国时间2019年7月15日发表在arxiv上，名为《在复杂数据集上的高效视频生成（Efficient Video Generation on Complex Datasets）》。

AI造假视频比造假图片更难

最近，俄罗斯AI研究人员开发的FaceApp着实大火了一把，这款应用通过人工智能技术能够改变用户自拍照的年龄、外貌、发色和性别，甚至可以生成虚构的人物照片。这直接让人们近距离地感受了人工智能技术给我们的生活带来的乐趣。

但是否有人想过，有朝一日这些技术也能应用在视频领域呢？

如果说BigGAN是DeepMind在图像领域开发的能够生成高度逼真图像的图像生成器，那么DeepMind研究人员们开发的DVD-GAN，就是人工智能在视频剪辑生成领域的最新突破。

研究人员在论文中表示，生成自然视频对生成式建模来说是一个较大的挑战，同时还会受到数据复杂性和计算需求增加的困扰。

因此，之前业界的研究人员们在研究视频生成领域时，几乎都围绕着相对简单的数据集，或者采用有限的时间信息来降低任务的复杂程度。

而这次，DeepMind的研究人员们主要针对视频合成和视频预测的任务，将生成图像模型的强大功能和逼真效果扩展到视频领域。

DVD-GAN：基于BigGAN模型结构

研究人员们基于BigGAN的模型结构，构建了DVD-GAN的系统，并引入了一系列用于视频生成的调整，使DVD-GAN能够在Kinetics-600上进行训练。

Kinetics-600是一组由50万段10秒高分辨率的YouTube视频剪辑汇编而成的训练数据集，它最初是为识别人类动作而制作的，比目前其他常用的语料库还大一个数量级。

同时，研究人员们表示，Kinetics-600具有多样化特征，能消除他们对过拟合（Overfitting）的担忧。过拟合主要是指机器学习时选择的模型所包含的参数过多，以至出现这一模型对已知数据预测得很好，但对未知数据预测得很差的现象。

另一方面，DeepMind的研究人员们利用生成对抗

以提供一个能生成动作的学习信号。

此外，DVD-GAN还有一个单独的Transformer模块，它可以让学习信息在整合AI模型中传播。

结语：用AI生成高度逼真视频的一次尝试

不管是BigGAN还是FaceApp，以往的研究人员们在人工智能生成图像领域进行了许多具有突破性的研究，但在视频领域，除了AI换脸曾火了一把之外，并没有更多的突破性进展。

而DeepMind的研究人员们基于BigGAN架构和Kinetics-600训练数据集开发的DVD-GAN，利用计算高效的判别器分解，扩展到时间更长、分辨率更高的视频。就目前来说，虽然这一成果还有些许不足，但这无疑是研究人员们利用AI生成高度逼真视频的一次重要尝试。

论文链接：https://www.jematic.cn

文章来源：捷马泰克