网易首页 > 新闻中心 > 正文

来涂鸦吧 用风格迁移把iPhoneX的照片变成艺术画

0
分享至

PConline资讯】自从Gatys发表了神经风格迁移算法,我们见证了海量的图片摇身一变成了艺术品。

算法用了一个前馈网络把给定图片的风格输入网络。我们还看到了超厉害的“非艺术气质的风格迁移算法”,“非艺术画”或者日常用品都可以铺开来构成风格图片来创造艺术。后来这个领域有了进展,由Johnson等人发展出了一个快速风格迁移方法。这个方法就为手机应用市场铺平了道路,其中一个著名的就是Prisma,用户可以在几秒内把手机拍摄的照片打造成艺术作品。

然而,利用这个算法生成的大部分艺术品主要内容是来自于内容图片。

这篇文章介绍了一种新颖的方式:以轮廓剪影为内容,以涂鸦风格来生产(设计)复杂艺术。

三大最流行的 AI 文章

  1. 从感知器到深度神经网络

  2. 用来解微分方程的神经网络

  3. 把你的树莓派打造成私家Google Home

繁复画作思想的起源

我是一个手绘“ 禅绕画 ”艺术家的超级粉丝。这种艺术品把复杂的图案或者涂鸦镶嵌进长方形或任何其他形状,看起来繁复而优美。

手绘禅绕画

它们最近用于中年少男少女的涂色绘本。可以想见,绘制这类艺术品需要很好的耐心。

缺乏耐心的那种人(包括我)仍然希望能够绘制一些复杂的艺术大作,那么我们就需要借助深度学习来拯救自己尚未泯灭的童心了。

复杂风格迁移的框架

这个框架是在Gatys的风格迁移算法为基础做一些小改动。我们的做法是,内容图片是一张剪影,风格图片可以是任何图案(从简单的黑白涂鸦到更复杂的色彩镶嵌)。这段代码包含了转换图案和创建基于内容图片的掩模,它们最终都会被用到生成图案中。

这个应用的权重是来源于预训练网络(VGGNET)。前面的特征层视为图片风格服务的,后面的特征层视为内容图片服务的。Gram阵度量了风格损失和内容损失,每次迭代需要极小化这个联合损失。

复杂艺术的神经风格迁移框架

生成了融合的图片以后利用掩模迁移并保存为输出。这个代码用以tensorflow为后端的keras编写的。 详细代码可以点击这里的Github链接查看 。

按照机器学习的实际应用的传统,算法一开始放在一只猫的剪影上进行了测试。

由猫剪影生成的复杂艺术品

不算太差吧。这幅画的风格来自于一组简单的涂鸦堆积在一起。

我们来尝试一下更复杂的色彩图案作为风格输入吧!这些大概需要100到250次迭代。如果迭代次数不够多,输出图片就会还留有一部分的剪影黑底。

输入风格(左)与生成的艺术品(右)

我们把给定的几何图案作为风格输入,就生成了极其有趣的,彩色玻璃效果的艺术品。

几何图案艺术品作为风格(左)与生成的艺术品(右)

这个代码还可以选择指定背景图片或背景色彩。

由文字剪影生成的艺术品

图案已经用光了?拍一张外婆被子的照片吧!

被子图案(左)与Darth Vader被子艺术(右)

现在Darth Vader和你外婆有的好聊啦~

为什么用剪影

为什么我们偏要来生成剪影轮廓?不能直接从已有的图案上面抠图么?或者就用白噪声来生成一种新的图案然后抠图安到任何图形上不好么?为什么偏偏想不开要用剪影呢?

把剪影用作内容图片当然有它的好处。以楼下三个生成的艺术作品为例。(X) 就是从原始图案直接抠图到舞者形状里的。(Y)是由白噪音加到内容图片上生成图案,然后抠图到舞者形状上,构成了最后的图片。(Z)是把剪影作为内容然后用掩模迁移来剪出最后的图片的。

前面两个图片(X)和(Y),我们看到图案(不管是不是生成的)都不能填充满整个舞者。(Y)我们虽然有了新的图案,但和形状配不起来。然而(Z)看起来图案放在这个图形里宛如天生般的适合。

沿着边边卡准的图案(左)和沿着边边的被子针脚(右)。

用被子图案生成的艺术品(见上方的Darth Vader)有着沿着边边的针脚,就好像布特地剪切好做出来的!用白噪声和内容图片生成图案或者直接从图案上剪切下来的时候就不会产生这样的情形。

另外,剪影不一定要全部都是黑色的。其实各种颜色就像种子(生成随机数的种子)一样可以生成不同种类的艺术品。我们想要把哪种颜色作为主色来选择剪影颜色(注意:黑色就像一个分界颜色——它是中性的)。

由同一风格生成的不同剪影的艺术品

应用

  • 任何图案设计(例如:logo, 符号, 海报)

  • 客户服装设计(有自己个性的或者印有自己喜欢的名言的T恤,或者设计一件抽象款的衣服)

  • 印刷设计(就把图案塞到文字轮廓里)

  • 设计涂色绘本

相关推荐
热点推荐
深圳烤鸡少年塌房!所谓秘方竟是“肉宝王”,评论区炸锅

深圳烤鸡少年塌房!所谓秘方竟是“肉宝王”,评论区炸锅

胡严乱语
2025-12-20 20:19:26
战友聚会AA制每人交3500元,因儿子高烧39度会没去成,次日民警上门

战友聚会AA制每人交3500元,因儿子高烧39度会没去成,次日民警上门

罪案洞察者
2025-12-16 14:42:51
西方媒体:哪怕中国全力以赴,也不可能按时建成这样庞大的工程

西方媒体:哪怕中国全力以赴,也不可能按时建成这样庞大的工程

乐天闲聊
2025-12-20 10:59:49
没有实名制,美国如何找到虚拟号码电诈分子,如何修理运营商?

没有实名制,美国如何找到虚拟号码电诈分子,如何修理运营商?

小小河
2025-12-21 17:22:33
钱多有什么用?42岁离婚无儿无女的尼格买提,走上了另外一条道路

钱多有什么用?42岁离婚无儿无女的尼格买提,走上了另外一条道路

古事寻踪记
2025-12-20 07:13:47
大量网友相信强力磁铁可让燃气表变慢,专家:窃气严重可刑事处罚

大量网友相信强力磁铁可让燃气表变慢,专家:窃气严重可刑事处罚

映射生活的身影
2025-12-20 03:39:27
波尔解说德甲焦点大战:樊振东独得2分,萨尔布吕肯3-2险胜杜塞

波尔解说德甲焦点大战:樊振东独得2分,萨尔布吕肯3-2险胜杜塞

乒谈
2025-12-22 01:20:02
有人暴赞,说这将是五十年内最伟大的电影!

有人暴赞,说这将是五十年内最伟大的电影!

幕味儿
2025-12-21 11:03:26
寿命与起夜次数有关?研究发现:寿命长的人,每晚起夜在这个次数

寿命与起夜次数有关?研究发现:寿命长的人,每晚起夜在这个次数

九天揽月1
2025-12-21 18:57:31
泰国大使馆账号大量涨粉,满屏泰国加油,有人呼吁为泰国捐款

泰国大使馆账号大量涨粉,满屏泰国加油,有人呼吁为泰国捐款

环球热点快评
2025-12-21 10:36:07
萨林杰立功!广东3人满分杜锋用活2奇兵,9分胜青岛胡队却尴尬了

萨林杰立功!广东3人满分杜锋用活2奇兵,9分胜青岛胡队却尴尬了

后仰大风车
2025-12-21 21:40:33
1月1日起:农村电价一夜大改!每度电多少?多人口家庭将省一笔!

1月1日起:农村电价一夜大改!每度电多少?多人口家庭将省一笔!

陈博世财经
2025-12-21 10:19:58
人活到最后,就会明白:人的终极归宿,其实就3个字

人活到最后,就会明白:人的终极归宿,其实就3个字

千秋文化
2025-12-21 18:02:15
勇士火箭赢球:王牌之外的答案?

勇士火箭赢球:王牌之外的答案?

张佳玮写字的地方
2025-12-21 14:14:47
海南封关120多万保时捷卡宴只卖60万;原价60万宝马X5只要35万!

海南封关120多万保时捷卡宴只卖60万;原价60万宝马X5只要35万!

荆楚寰宇文枢
2025-12-21 21:46:30
大范围风雨!冰冻!江苏最新预测

大范围风雨!冰冻!江苏最新预测

江南晚报
2025-12-22 03:34:38
朱芳雨:夏天有五六支队想要徐昕,让他去广州锻炼以后还回宏远

朱芳雨:夏天有五六支队想要徐昕,让他去广州锻炼以后还回宏远

林小湜体育频道
2025-12-22 01:57:27
王楚钦孙颖莎用受伤换来的改革,WTT总决赛终于改制:取消混双小组赛,赛程延长至6天

王楚钦孙颖莎用受伤换来的改革,WTT总决赛终于改制:取消混双小组赛,赛程延长至6天

好乒乓
2025-12-21 14:05:43
国际航班上骂中国姑娘“黄皮猪”的外籍乘客被严惩了!

国际航班上骂中国姑娘“黄皮猪”的外籍乘客被严惩了!

忠于法纪
2025-12-21 19:04:54
深圳前市长8年卷走20亿,花天酒地包养女星,落马时只剩三千块

深圳前市长8年卷走20亿,花天酒地包养女星,落马时只剩三千块

文史旺旺旺
2024-12-24 20:42:21
2025-12-22 05:23:00

头条要闻

洛熙爸爸看1000遍法医视频找女儿 发解剖台画面被禁播

头条要闻

洛熙爸爸看1000遍法医视频找女儿 发解剖台画面被禁播

体育要闻

勇士火箭赢球:王牌之外的答案?

娱乐要闻

星光大赏太尴尬!抢话挡镜头,场地还小

财经要闻

老房子“强制体检”,政府出手了

科技要闻

生态适配已超95% 鸿蒙下一关:十万个应用

汽车要闻

-30℃,标致508L&凡尔赛C5 X冰雪"大考"

态度原创

房产
教育
亲子
旅游
军事航空

房产要闻

中交·蓝色港湾一周年暨蓝调生活沙龙圆满举行

教育要闻

山东理工制药专业近三年分数线揭秘!稳操胜券

亲子要闻

5个月婴儿心脏手术变悲剧:医疗疏忽引发巨大反思!

旅游要闻

万物皆可爱

军事要闻

石破茂:拥核绝不会给日本带来正面影响

无障碍浏览 进入关怀版
×