网易首页 > 网易号 > 正文 申请入驻

AI用50个三角形画出抽象版蒙娜丽莎,有股后现代的感觉了

0
分享至

明敏 发自 凹非寺
量子位 报道 | 公众号 QbitAI

现在,给AI一个短语和50个三角形,它就能创作一幅极简风格的抽象画了。

只需输入“a drawing of cat(一张猫的画像)”,一只棱角分明、散发着冷酷气息的抽象猫就生成了。


不只是这种泛泛的概念,给出特定词汇,这个AI也能指定作画。

比如输入“Walt Disney World(迪士尼乐园)”,50个三角形立刻重新排布,一个风格完全不同的抽象版迪士尼城堡就出现在了眼前。


可以说是完完全全抓住了迪士尼城堡的精髓。


以上这些“大作”,其实都是进化策略 (ES)和CLIP结合后生成的效果,由谷歌大脑团队出品。

他们让两个AI相互配合,根据文字提示及具体图像,用一堆三角形创作出了一幅幅极具特色的抽象画。

抽象后的谷歌大楼,大概长这样:


不能说毫无关系,只能说一模一样啊。


这回,真的有点后现代艺术的feel了。

只用三角形创作的抽象画

从生成的效果可以看到,ES算法+CLIP其实就是把一堆随机的三角形重新排布,通过调整它们的大小、位置、颜色,逐渐将其构建成一个与给出词汇所吻合的图像。


具体来看,在最初始时,ES算法会以三角形的坐标、RGBA值作为参数,在画布上随机给出一些三角形。

进化策略(ES)算法的原理则像进化论一样,它可以根据给出的信息不断优化,直到得到一个最优解。

CLIP则是OpenAI开发的一个负责给图像重排序的模型。

它会对ES算法给出的三角形图像与文字描述的相似度进行打分,然后将结果反馈给ES算法,ES算法就会为了提升分数而不断迭代,最后得到一副艺术画。


除了给出文字指令外,直接给一张图作为初始信息,只用ES算法也能进行作画。

这不,用50个三角形、迭代10000次后,后现代抽象版蒙娜丽莎诞生了。


如果增加更多的三角形,算法给出的效果也会更好。

在下面的对比中,当三角形数量达到200时,生成的图像立刻增加了亿点点细节。

其中达尔文和蒙娜丽莎的例子,fitness几近达到了100%


此外,为了实现更好的效果,研究人员还采用了ClipUp优化器

从对比中可以看到,使用优化器后迭代1万次后的效果比基本算法迭代56万次后的还要好。


同时,与基于梯度的渲染方法对比,ES算法的表现也可圈可点。

渲染方法会更侧重于纹理和颜色上的细化,而ES算法会更加侧重于如何布局这些三角形。


那么给出文本指令生成的效果如何呢?


在“Self”、“Human”、“Walt Disney World(迪士尼乐园)”几个案例中,算法的表现依旧很优秀。

在体现关键字主题精髓的情况下,随着构图三角形数量的增多,算法给出的结果细节也就更为丰富。

但是在“ picture of Tokyo”这个例子中,它的表现就不那么好了。

研究人员认为这是由于算法在生成阴影较深的三角形上还存在困难,所以造成了这一结果。

而且面对命题作业,算法也会尽可能给出不同的答案。

在这几个案例的重复4次测试中,我们可以看到生成的图像都存在明显的区别。


Demo可试玩

其实这并不是CLIP第一次“指挥”别的AI作画了。

此前与GAN配合,就让图像变成了CG艺术风。


事实上,这一次的抽象画效果,你也可以体验。

团队已经将代码开源,在Colab上也能进行试玩(链接已附在文末)。


这是有网友上传的生成图像,效果真的还不错,你能猜出来这是谁吗?


论文链接:
https://arxiv.org/abs/2109.08857

GitHub开源地址:
https://github.com/google/brain-tokyo-workshop/

试玩链接:
https://colab.research.google.com/drive/1DGNxs8E4cA_ZUwPQdusxDArCWj-JX5TG#scrollTo=7AkoGodQw8kr&uniqifier=4

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
钢材价格跌到5300元一吨,后市随时可能加速下跌

钢材价格跌到5300元一吨,后市随时可能加速下跌

情初似海
2021-10-23 09:28:38
出生在几月的生肖蛇,一生龙腾四海,不愁名利,带着全家人衣食无忧

出生在几月的生肖蛇,一生龙腾四海,不愁名利,带着全家人衣食无忧

轮回菌
2021-10-23 12:30:00
有没有像《黑客帝国》一样的电影?有的。看完8部,让你怀疑人生

有没有像《黑客帝国》一样的电影?有的。看完8部,让你怀疑人生

装修细节窍门
2021-10-23 02:29:33
和司机偷了一次,结局竟如此荒唐

和司机偷了一次,结局竟如此荒唐

铁路西少年
2021-10-21 16:50:39
“花样繁多”,龙湾一卖淫“窝点”被端,服务方式被曝光...

“花样繁多”,龙湾一卖淫“窝点”被端,服务方式被曝光...

龙湾频道
2021-10-23 12:19:14
比红薯营养,比玉米香,秋天抓紧吃,蒸1锅吃7天,凉吃也柔软

比红薯营养,比玉米香,秋天抓紧吃,蒸1锅吃7天,凉吃也柔软

美美家的小厨房的
2021-10-21 08:52:11
美媒列出了球迷心中最不应该落选75大球星的十名球员,谁最遗憾

美媒列出了球迷心中最不应该落选75大球星的十名球员,谁最遗憾

阿雄侃篮球
2021-10-22 21:51:34
单身人口达到2.4亿?人民日报指出主要原因,专家提出新建议

单身人口达到2.4亿?人民日报指出主要原因,专家提出新建议

老王说楼市
2021-10-22 19:00:02
在女人眼里,男人最掉价的五种行为,希望你没有

在女人眼里,男人最掉价的五种行为,希望你没有

城东木子
2021-10-22 17:23:51
女子请公司定制衣柜,做到一半被停掉,店家哭诉:沟通过于麻烦

女子请公司定制衣柜,做到一半被停掉,店家哭诉:沟通过于麻烦

娘惹烹饪
2021-10-23 00:05:02
李云迪被抓细节疑曝光,多次进行交易,警方蹲守现场抓到实锤

李云迪被抓细节疑曝光,多次进行交易,警方蹲守现场抓到实锤

辽东春秋
2021-10-21 22:50:56
妻子劝丈夫先离婚再追求自己,丈夫签字后妻子火速再婚,丈夫无奈狠心抛弃儿子!|案件回顾

妻子劝丈夫先离婚再追求自己,丈夫签字后妻子火速再婚,丈夫无奈狠心抛弃儿子!|案件回顾

人情词话
2021-10-23 07:32:10
李子柒上央视了,不过她的穿搭真的很随意,慵懒肥大,看着就舒服

李子柒上央视了,不过她的穿搭真的很随意,慵懒肥大,看着就舒服

BiuVogue
2021-10-23 13:08:58
古人发明的4大“奇技淫巧”,第三件慈禧最爱,可惜都已经失传

古人发明的4大“奇技淫巧”,第三件慈禧最爱,可惜都已经失传

OMG是三国
2021-10-22 22:15:43
广东房价下跌最惨名单,东莞、中山、汕尾环比跌幅最大

广东房价下跌最惨名单,东莞、中山、汕尾环比跌幅最大

你的置业顾问
2021-10-23 07:11:53
1950年,斯大林大发雷霆,原因竟是有人卖给中方低级飞机:米格9

1950年,斯大林大发雷霆,原因竟是有人卖给中方低级飞机:米格9

世界历史百科大全
2021-10-23 05:31:48
浓眉霍华德冲突真相曝光,魔兽:场上发生分歧!浓眉追着他吵架

浓眉霍华德冲突真相曝光,魔兽:场上发生分歧!浓眉追着他吵架

李喜林篮球绝杀
2021-10-23 13:42:39
母亲当了三年保姆,竟然不知雇主是自己的亲生女儿

母亲当了三年保姆,竟然不知雇主是自己的亲生女儿

情感私话
2021-10-23 00:41:30
“错换人生”新进展:4个疑点无法解释,有2人或许知道内情

“错换人生”新进展:4个疑点无法解释,有2人或许知道内情

卡通动物家族
2021-10-23 10:18:39
大厂金领被裁,房产精英出国,富二代进体制,人人都在找出路

大厂金领被裁,房产精英出国,富二代进体制,人人都在找出路

牛叫兽读财
2021-10-22 22:33:19
2021-10-23 17:00:49
量子位
量子位
追踪人工智能动态
5544文章数 130087关注度
往期回顾 全部

艺术要闻

世界上最大摩天轮“迪拜眼”开放

头条要闻

沈阳燃气爆炸系厨师忘关燃气?3天爆炸了2次?官方回应

头条要闻

沈阳燃气爆炸系厨师忘关燃气?3天爆炸了2次?官方回应

体育要闻

湖人双塔内讧!板凳席直接动手

娱乐要闻

乐嘉的毁灭史:从名满天下到销声匿迹

财经要闻

科技要闻

苹果更新应用商店规则:允许开发者使用替代支付方式

汽车要闻

专用充电站已经上线 特斯拉Semi卡车或明年发布

态度原创

数码
手机
健康
教育
军事航空

数码要闻

曝苹果AirPods Pro 2实拍图:充电盒新增扬声器开孔

手机要闻

三星Galaxy S22 Ultra钢化膜现身:极致微曲屏

社恐、牛杂症……揭秘社交名词的终极奥秘

教育要闻

37名家长联名让7岁女生转学,母亲:女儿被迫退学后我才知道,不签字的会被当异类

军事要闻

中俄两国不是盟友,胜似盟友