网易首页 > 网易号 > 正文 申请入驻

AI生成中国山水画!普林斯顿姑娘本科毕业作品,线条笔触骗过半数人类观察者

0
分享至

  大数据文摘出品

  用GAN创作似乎已经不是新鲜事了。

  2019,英伟达在GTC大会上推出了一个人工智能图像生成器“GauGAN”。用户只需要简单的勾画几条线条轮廓,便会自动生成美丽的风景图片。

  

  这款AI使用的技术是生成对抗网络(GAN),也是一种深度学习模型,现在被广泛用于图像生成。

  包括去年MIT和IBM沃森联合实验室联合发布的AI Portraits Ars,用户可以在线将自己的照片转变为中世纪的优化风格,这个在线工具一度火爆到网站宕机。

  

  你可能会说,“这不就是风格迁移么?

  不,团队人员专门强调,这不是风格迁移,这是AI自己创作的,从线条到色调,都和人类画师一样,照着真人的样子自行创作。

  但是正如东西方巨大的文化沟壑一样,在艺术和技术结合的领域,AI似乎也更偏向西方,我们看到不少AI生成写实主义、后现代,甚至是抽象主义的作品,但是却很少能看到AI在传统东方艺术上的表现。

  终于,一位普林斯顿大学的本科学生Alice Xue将目光投向了中国山水画

  在她的毕业论文中,她开发了一款名为SAPGAN(Sketch-And-Paint GAN)的AI模型,该模型可以生成传统的中国山水画,为此她也获得了普林斯顿2020优秀毕业论文奖。

  论文链接:

  https://arxiv.org/pdf/2011.05552.pdf

  论文提到,在一项242人的图灵视觉测试研究表明,SAPGAN创作出的画作被误认为人类艺术品的频率高达55%,显著高于基线GAN模型创作的画作。

  和人类一样,先画草图后着色

  传统中国山水画在绘制过程中,一般有勾、皴、点、染等步骤,顾名思义,就是先勾画出大致轮廓,再进行渲染。

  

  AIice提出的端到端生成中国山水画无条件输入模型遵循的也是这个步骤。为了实现这一过程,AIice构建了两个模型:

  Stage I: SketchGAN

  Stage II: PaintGAN

  SketchGAN从样本图像中采集高分辨率的边缘图,而PaintGAN是根据SketchGAN进行“翻译” 创作,从而生成一幅完整的山水画。

  

  中国人反而更容易误判

  实验的结果也很惊人。

  在最后进行测评时,242名参与者中,模型生成的画有一半以上(55%)被误认为是人类作品。

  

  视觉图灵测试的分数分布,要求参与者判断艺术品是由人类还是计算机制作的(平均值= 70.5%)

  在“审美愉悦”、“艺术构图”、“清晰”和“创造力”方面,SAPGAN模型在所有艺术类别中的评分始终高于基线。SAPGAN与人类绘画最大的区别是“清晰”。

  让人匪夷所思的是,中国人可能更容易被SAPGAN欺骗。作为母语为汉语的人,多少是见过几幅山水画的,但是在判别一幅山水画是否为SAPGAN所作时,中国人可能更容易被欺骗。

  作者比较了母语为汉语和英语的参与者的结果,看看文化接触是否能让中国参与者正确判断这些画。然而,说汉语的参与者平均得分为49.2%,明显低于说英语的考生的73.5%。

  也就是说,说中文的人70%的时候还会把SAPGAN的画误认为是人,而整体水平是55%。显然,不管对中国文化的熟悉程度如何,参与者都很难区分绘画的来源。

  自己收集两千多张山水画数据,GitHub上公开

  文章提出的模型是在一个新的中国传统山水画数据集上训练的,这一数据集不是来自百度或者谷歌,而是由作者本人收集。

  AIice表示,目前的山水画数据集存在不唯一性和图像质量和数量不足的问题,为了促进这一领域的发展,Alice本人建立了2192幅高质量中国传统山水画组成的新数据集,这些山水画来自普林斯顿艺术博物馆藏品。

  目前,这些有价值的绘画在很大程度上还没有被生成创作研究触及,作者也在GitHub上发布了这一数据集供公众使用。

  Alice在接受学校采访时说,普林斯顿大学美术馆有一个令人惊异的开放式数字收藏中国画,这对我的数据集很有价值,但不幸的是,大多数研究人员没有充分利用它。

  

  数据集链接

  https://github.com/Alice x 2020/Chinese-landscape painting-Dataset

  写论文之前从没上过机器学习课,准备去Facebook工作

  看到这里,你可能觉得Alice是一位“资深程序员”了。但是她表示,“我写这篇论文的时候从来没有上过机器学习课程,所以我经常被这样一个问题弄得不知所措: 像我这样的新手能为已经存在的创新研究做些什么。但是我发现总是有一个有趣的角度来处理一个问题,因为一个人的兴趣和技能是他们独一无二的。”

  在谈到对其他的学生建议时,Alice说,将数字化人文融入你的工作中是自然而然的事。找到你感兴趣的东西——无论是19世纪的文学作品还是爵士乐——总有一种方法可以从中收集数据,用来分析或制作与之相关的技术工具。

  谈到自己未来的规划,Alice表示自己准备去Facebook工作,成为一名软件工程师。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐

刘晓庆为赶时髦,穿西装把裤子塞进袜子里,结果却贻笑大方

旅行一路有你
2021-01-13 10:48:44

这届新秀真奇葩:状元是软蛋!榜眼变水货,有人却比年轻詹皇更强

小闲人谈篮球
2021-01-15 17:53:51

房价比旁边低了2万/㎡,业主不服气:众筹2000万改外立面!

南京楼市情报
2021-01-15 20:43:16

揭开越南新娘灰色产业链:20万,保证处女,跑掉一个,赔一个

皮皮电影
2021-01-14 17:36:25

痴情日本富豪,单身30多年,终于在55岁等到离婚的中国女神

桃染墨痕
2021-01-15 19:18:28

女生嘴上说“不要”, 身体没反抗, 男生硬上, 是强奸罪?

权威科技控
2021-01-15 09:31:40

一旦出现“1粗、2痛、3多”,十有八九是肺癌,别不当回事

足球办公室
2021-01-15 05:21:34

在中国,这5个国际顶级酒店品牌明明超赞,但是超便宜!人均最低200多......

TripAdvisor猫途鹰
2021-01-15 20:17:32

刚刚!拜登公布$1.9万亿发钱计划细节,再发$1400!儿童抵税额增加!最低工资上涨…

北美省钱快报
2021-01-15 08:27:41

特朗普要求国会削减274亿美元预算,民主党议员:缺德

观察者网
2021-01-15 18:31:16

网红天佑复出试水被封,直播仅几分钟被封号!

嘉嘉网红娱乐
2021-01-15 09:30:44

关于网上反映武汉市对老年人群进行集中核酸检测的情况说明

人民网
2021-01-15 22:28:30

TVB最胖女艺人做吃播,自曝连吃15年花胶,36岁无一条皱纹

会火
2021-01-15 20:02:11

存取金额达到“这个数”将被登记,多家银行已开始实施,要注意了

钱包那些事儿
2021-01-15 15:21:10

隔离14+14!南京、连云港、徐州等地疫情最新通报

南京择校
2021-01-15 22:58:58

一票之差落选中国首都,曾经的八朝古都,没落成如今的三四线城市

史海观复文史
2021-01-15 09:31:10

蔚来李斌吹了个牛逼,几天就被人拆穿了

易简财经
2021-01-14 18:48:18

“我不服务犹太人”:法国一名阿尔及利亚籍快递员遭逮捕并被驱逐出境

社会de记忆
2021-01-15 09:06:14

特朗普欲上演“最后疯狂”,为何中方极其反常?最佳反击时机来了

前沿分析局
2021-01-15 11:15:51

黄晓明直言:baby没有我什么都不是,她配不上我。看baby怎样反击

旅游中民俗与文化
2021-01-15 11:34:57
2021-01-16 02:41:02
大数据文摘
大数据文摘
专注大数据,每日有分享!
4005文章数 83330关注度
往期回顾 全部

艺术要闻

再创“灰黄”的2021,其实艺术家早就预料到了

头条要闻

离职前夕 特朗普要求下属不许在他面前提尼克松

头条要闻

离职前夕 特朗普要求下属不许在他面前提尼克松

体育要闻

讽哈登?塔克发文谈忠诚无价 维斯默默点了一个赞

娱乐要闻

40岁阿朵扎麻花辫拍照 清纯可人

财经要闻

科技要闻

悟空问答关停:字节跳动的第一场败仗

汽车要闻

国产便宜 16万买个特斯拉 Model 2效果图曝光

态度原创

艺术
家居
旅游
房产
公开课

艺术要闻

再创“灰黄”的2021,其实艺术家早就预料到了

家居要闻

网红男演员把家装修成少年宫 满屋都是名贵球鞋

旅游要闻

北方老人到南方越冬,北海和三亚成热门城市

房产要闻

2020年房企热度排名 暴露多少打工人的奋斗生活

公开课

普通本科与985差在哪:你的长处是他们的基础