用AI指挥另一个AI，GAN+CLIP的组合成了“CG艺术家”

图片地址：https://n.sinaimg.cn/sinakd20210627s/238/w519h519/20210627/18a2-krwipar7540475.jpg

来源：量子位梦晨 发自 凹非寺量子位 报道 | 公众号 QbitAI嫌弃GAN生成的图像不够炫酷？不需要改变数据集，只需要给CLIP下达的命令中把“虚幻引擎”几个字加上，再让CLIP去指挥GAN，图像就立马变成了高大上的CG艺术风。文字中加入虚幻引擎这个技巧，最早由Aran Komatsuzaki发在推特上，吸引了大量CV圈的人来围观。后来有人把这套流程发在了Colab上，网友们都玩疯了。还可以指定成“彩色铅笔风格”或者“吉卜力风格”：最绝的是，加上“3D photo inpainting”竟然可以生成立体构图。CLIP是OpenAI开发的一个负责给图像重排序的模型，它与GAN合作的方式也很简单。先用一张平平无奇的随机图案作为种子，像这种：像这样让CLIP算出其与文字描述的相似度打分，然后反馈给GAN，让GAN以提升分数为目标不断迭代。AI艺术家组合就这么出现了。除了在提示中加入风格要求之外，还可以直接告诉AI一个人名，看看在A