照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家

说到能将照片转成绘画的 AI 工具,首先想到的也许是多年前 Prisma,当时以“能让照片瞬间变名画”爆红。

也许还会想到最近流行的迪士尼滤镜,在 Snapchat、B612 等一些热门美图 App 都能找到这功能。最近引起热议的动漫风转换工具 AnimeGANv2 又再次由衷感叹科技力量之强大:只要挑选到正确的照片,成像效果真的可用“惊艳”形容。

AnimeGAN 原是 GitHub 开源项目,2019 年发表后就引起不少讨论,还有人专门发文讲述演算法模型。此工具是基于 GAN(生成对抗网络)打造,相比传统神经网络模型,GAN 是种全新非监督式架构。

训练 AI 时,GAN 包括 A 和 B 两套独立网络,A 网络是需要训练的分类器,分辨成图是否符合标准;B 网络是生成器,生成类似真实样本的随机样本,并当作假样本以欺骗网络 A。藉 A 和 B 相互博弈,AI 水准逐渐提升,最后大提升品质。

最近 AnimeGAN 发表二代,更新后 AnimeGANv2 支援风景照和风景影片三种动漫化风格(分别是宫崎骏、新海诚和今敏),视觉效果更佳,模型规模更小且容易训练。

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图2张

(Source:知乎)

更重要的是目前 AnimeGANv2 成果经社群贡献者开发,由 Gradio 实现直接线上使用的 Demo,并发至 Hugging Face,换言之任何人都可网络轻松体验 AnimeGANv2 的效果。

打开网站可看到简单的 App 线上版。照片上传完成后点击“Submit”,等待数秒就可看到效果。

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图3张

(Source:AnimeGANv2,下同)

工具本身也提供多样板照片供测试,网页下拉点击这些照片再回到上方就可看到成果。图片下方可选择不同效果,“version 1”代表提高风格化,降低稳健性的设置,“version 2”相反,降低风格化程度,提高稳健性。

简单来说选择 version 1,照片会更有动漫特点,但写实还原度会降低,选择 version 2 相反,生成更逼真的效果图。下图钢铁人是两版对照,上面是 version 1,下面是 version 2。

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图4张

AnimeGANv2 提供很多名人动漫成品照给用户参考,效果都非常优秀。

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图5张

来实际体验,首先是人像。先从免费图库 pixabay 找几张清晰人像(男性、女性和孩子),以下是测试效果。

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图6张

效果十分不错,生成图人物边缘清晰,五官分明,绘画感强,且更难得的是 App 捕捉人物外貌特点准确,颇具神韵。当然普通人没有专门设备和技术帮助下,还是很难提供 pixabay 般干净清晰的照片,因此笔者网络找了几张拍摄较随便的大头照对比。

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图7张

测试照片均为亚洲人,且应该就是拍照者随意自拍,AnimeGANv2 演算效果并没有让人失望。

检测发现,白底证件证照效果最好,基于肖像权原因,效果图不能公开。如果没有合适的照片,不妨直接使用证件照体验,不仅成图效果好,人物气质把握精准,美颜效果更超群。

不过有个美中不足的地方,不知道是不是训练 AI 时多是女性照片或提供 AI 学习的动漫图片风格偏阴柔,当输入男性真人照时,成像眼睛会显得有些女性化,戴眼镜遮挡能改善效果。

上述测试是无背景大头照,倘若是有背景的生活照效果又如何?

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图8张

虽然整体效果还是能看,但五官瞬间模糊,看来想获得更好效果还得尽量使用半身或大头照。另外发现 App 对照片品质也有要求,模糊的大头照同样会使人物五官无法精确捕捉。

再来尝试动物照,同样从 pixabay 取材。选择小猫照片时特意挑了一张表情奇特且脸部有遮挡的照片,没想到 AnimeGANv2 出色完成任务。

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图9张

一直以为选择“Version 2”应对五官细节等还原最佳,但测试小狗照时发现并不一定这样,看来据不同对象挑选适合风格也很重要。

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图10张

▲ 小狗 version 1 (上)与 version 2 对比。

最后是风景照, 虽然在知乎里描述说 AnimeGANv2 目前支援三种动漫场景风格,但线上版并没有风格选项(可能需至 GitHub 完整程式码找找)。从 pixabay 挑选北京天坛、香港街道、京都神社及两张自然风景照测试。

照片动漫化神器 AnimeGAN 推出线上版,效果堪比专业画家 AI与大数据 图11张

虽然看不太出来像哪位大师手笔,但成品效果都令人满意,特别香港街头照充满艺术感,都可以说是手绘的以假乱真。

市面照片转绘画风格的应用不少,甚至手机常备的美图秀秀等 App 就附带此功能,AnimeGAN 的团队为何要花三年多对这工具精雕细琢?也许这轮测试下来,我们会得到答案──成图自然又好看,跟平时随处可见但效果千篇一律的绘画风格转换 App 不一样。

虽然工具页面朴素,成像时间也是短短几秒,但蕴含复杂计算和数不胜数的 AI 锻炼,用户难以得知背后原理,但惊艳效果的感性体验就是最好证明。

(本文由 爱范儿 授权转载;首图来源:AnimeGANv2)

延伸阅读:

  • Prisma 让照片变成毕卡索大作的秘密是什么?

   特别声明    本页内容仅供参考,版权终归原著者所有,若有侵权,请联系我们删除。