见知AI巡山报告 – 2020年12月

在前两期巡山报告中，我们有介绍过生成式对抗网络（GAN），现在已经被广泛应用于图像生成。

2019，英伟达在GTC大会上推出了一个人工智能图像生成器“GauGAN”。用户只需要简单的勾画几条线条轮廓，便会自动生成美丽的风景图片。

去年MIT和IBM沃森联合实验室联合发布的AI Portraits Ars，通过分析人脸特征，为用户重绘中世纪风格的肖像画。

这听上去似乎与前两年大火的风格迁移软件Prisma（类似美图秀秀的油画滤镜）并无区别，都是将照片转换成另一种画风，但其实他们的本质是完全不同的。

上图描述了Prisma风格迁移的原理：先提取原图中的内容C，再去提取目标风格作品中的纹理S。最后在生成阶段使用纹理S对内容C进行绘制，形成最终合成的作品。也就是说，使用Prisma的风格迁移无法改变原照片的Content，图像的结构线条不变，只是重新进行了“上色”而已。

而基于GAN的图像重绘技术就不一样了，它会先从自己存储的画像库中按照特征向量映射出与输入照片最接近的一幅画作，然后参照着那幅作品像画家一样重新绘制输入的照片。所以AI Portraits Ars生成的画像可以不仅改变了画风，线条结构也会被修改。

下图使用Prisma和AI Portraits Ars分别对LadyGaga的照片进行实验，可以看出两种方法的明显差别：b图中的图像与原图只有颜色上的区别，而c图经过GAN重绘后，人物面部的结构和线条都按照油画的风格做了调整。

看到这里你是否会觉得，AI似乎更偏向西方，很少能看到它在传统东方艺术上的表现。

这不，普林斯顿大学的Alice Xue就开发了一款名叫SAPGAN的模型。同样是基于GAN，SAPGAN无需输入照片，就可以自己像国画大师一样“画出”以假乱真的中国山水画，想画多少幅都可以！

传统中国山水画在绘制过程中，一般有勾、皴、点、染等步骤，顾名思义，就是先勾画出大致轮廓，再进行渲染。

AIice提出的无条件输入模型遵循的也是这个步骤。她构建了两个模型：SketchGAN 和 PaintGAN。

SketchGAN从样本图像中采集高分辨率的边缘图，引用无条件图像合成模型StyleGAN2，利用特征向量生成新图像的轮廓草图；而PaintGAN是根据SketchGAN进行“翻译”创作，填充色彩和细节，从而生成一幅完整的山水画。

Alice的算法在最后进行测评中收获了非常不错的效果，242名参与者中，模型生成的画有一半以上（55%）被误认为是人类作品。其中，说汉语的参与者平均得分仅为49.2%。

看到这里，你是不是也想亲自辨别一下真假山水画了呢？

你看，这两个与真人无异的俊男美女的脸，简直完美。但其实他们并不是真人，而是阿里巴巴最新推出的AI 模特“塔玑”。

不同于以往的AI模特，“塔玑”在目标人脸（Target Face）模块基础上，生成成千上万种五官组合，得到全世界独一无二的虚拟人脸，然后再利用算法技术将服装平铺图转化成 3D图“穿”在模特身上。

所以商家只需提供一个产品的平面图片，算法系统会在一天内自动渲染生成优质模特图、详情页图。

对于中小网店商家来说，拍图成本高，盗版现象严重都是聘请模特时顾虑的问题。而“塔玑”的出现不仅大幅缩减了90%以上的拍摄时间和费用，还在图像中加入了肉眼看不到的数字水印技术，保护了商家的版权。日前，阿里上线了 AI 模特后，已有不少商家进行了试用。

使用淘宝识图我们找到了这家名叫“啊啦柏ALABO”的店，可以看到店铺新上传的两款商品模特图一改往日“挡脸”风，露出了“庐山真面目”。

但是仔细观察，还是可以看出AI模特的头身比有些不协调，腿部和衣服的衔接也不自然。“月销量0”似乎也表明，顾客并不为这项高科技买单。而这也正是本项目的难点，如何把2D照片转换成逼真的三维立体图，技术还有待提升。

值得期待的是，未来阿里也为商家提供了可以自主选择、定制模特的规划，甚至消费者也可以按照自己的身高体重去线上试衣。同时，这个 AI 虚拟模特还能当网红主播，匹配消费者喜欢的内容。

或许在不久的将来，每家淘宝店铺都会拥有属于自己的有个性的AI“代言人”，甚至可以打造成IP进行推广。但是与此同时，电商模特市场也会受到巨大的冲击，低成本不重样的AI模特可能会抢走“真模特”的饭碗。

大家也可以在阿里原创的官网上报名体验“塔玑”：

https://yc.alibaba.com/#/targetFace

相关文章：

https://mp.weixin.qq.com/s/2N5PHIl_4p-xBQbHl46Liw

https://www.leiphone.com/news/202012/a6eNdWVZsOqj9DHh.html