微比恩 > 信息聚合 > AI 靠语意理解把照片变抽象画:无需相应数据集,只画 4 笔也保留神韵

AI 靠语意理解把照片变抽象画:无需相应数据集,只画 4 笔也保留神韵

2022-03-20 13:27:21来源: IT之家

只用几笔,如何勾勒一只动物的简笔画,很多人从小都没整明白的问题 —— 如今 AI 也能实现了。下面图中,左边是三张不同的动物照片,右边是 AI 仅用线条来描出它们的外形和神态。从 32 笔到 4 笔,即使大量信息都抽象略去了,但我们还是能辨识出对应动物,尤其是最下面的猫猫,只需 4 笔曲线也能展示出猫的神韵:再看这匹马,抽象到最后只保留了马头、马鬃和扬蹄飞奔的动作,真有点毕加索那幅公牛那味儿了。更神奇的是,其背后的模型 CLIPasso 并没有在速写画数据集上训练 —— 等于说,没“学”过怎么画抽象画,按照文字描述就能完成简笔速写。要知道,日常速写都比较抽象,即使是人来画,要想抓住物体的“灵魂”,也需要经过很久的训练。那为什么这个 CLIPasso 甚至连速写画数据集训练都没做,就能 get 到抽象简笔画的“灵魂”呢?CLIPasso 如何画抽象画其实 AI 画抽象简笔画比人更难。既要准确地理解语义,又要在几何上相似,才能让抽象

关注公众号
标签: AI