AI漫画系统CariGAN为何能与艺术家一决高下

[网易智能新闻，11月23日]研究人员投入了大量精力来训练更聪明、更准确、更复杂的人工智能。然而，观察一路上发生的琐事也很有趣。

我们所知道的是，这种算法可以创造出逼真的人物或视频，并将其制作成真实的，但来自微软和香港城市大学的人工智能开发团队却回避了渲染的准确性。相反，他们使用人工智能将照片自动转换成卡通，卡通可以模仿你在游乐园和其他地方看到的夸张和高度程式化的图像。

斯坦福大学研究生凯蒂·曹与香港城市大学的人工智能研究员廖婧和微软的陆源合作，开发了一个利用神经网络绘制卡通的系统。这些漫画令人难以置信。考虑到曹在参与本项目时，还只是微软研究院视觉计算团队的一名实习生。

两个人工智能合作创建动画系统

为了创建一个能映射到一个人面部特征的风格图像，工程师需要训练两个独立的人工智能系统，并最终教会他们一起工作。否则，结果将看起来更像多里安·格雷的画的恐怖版本，就像以前创造人工智能卡通的尝试一样。

这里的人工智能实际上是一对生成的对抗网络，称为对抗网络。它的第一个神经网络CariGeoGAN确定了照片中人脸的几何形状，并将其映射成一个卡通模型。加勒比海的另一半，加勒比海，进行“风格转移”或者将艺术外观应用于几何图形。

为了让卡里根把一张相对乏味的照片变成赏心悦目的东西，该系统接受了数千次手绘图像训练。

为了确定疗效，研究人员进行了两项研究。首先是确保人工智能卡通保留肖像主题的身份。这里的主张是，一部好的漫画必须以夸张的形式抓住一个人的本质。根据研究人员的说法，受访者称加勒比人的卡通并不比手绘艺术家差。

研究人员进行了第二项研究，以确定与手绘艺术家的作品相比，“绘画”的整体效果。这也显示了巨大的成功。

在CariGAN AI中，一个GAN负责分析一个人的面部照片并夸大某些特征，如高颧骨和突出的下巴，就像漫画家一样，而另一个GAN负责模仿漫画家常见的笔触和艺术风格。把它们放在一起，你会看到一些愚蠢的人工智能艺术作品，看起来就像他们描绘的人。或者，至少它看起来像一个人画的卡通。

分析视频并逆向寻找卡通人物原型

CariGANs人工智能还可以分析视频中的帧，并从中制作卡通。下图是美国总统的演讲视频。

这对于动画师来说非常有用，证明了与人工智能一起创造的“艺术”可以激发人类精神中的某些东西。

CariGANs人工智能还可以对卡通进行逆向工程，并确定卡通人物的真实外观。研究人员说:“我们认为这可能有助于卡通中的人脸识别。”这听起来有点吓人。但是如果这意味着我可以用一个巨大的头和一顶宽边帽来画我自己，那就把我算进去。

值得注意的是，CariGAN AI的排名比手绘的好22.95%，这意味着结果有时会让用户误以为这是一幅真正的手绘漫画。虽然离理想的作弊率(即50%)还很远，但研究小组的工作已经迈出了一大步，绘画效果比其他方法更接近艺术家画的漫画。

该艺术算法将于今年12月在东京举行的国际动画和游戏技术会议(SIGGRAPH Asia 2018)上发布。