网易首页 > 网易科技 > 网易科技 > 正文

脸书研发新AI工具:让照片中闭眼的人重新睁眼

0
分享至

脸书研发新AI工具:让照片中闭眼的人重新睁眼

本文系网易智能工作室(公众号 smartman163)出品。聚焦AI,读懂下一个大时代!

【网易智能讯 6月18日消息】有很多方法可以处理照片,比如消除红眼或镜头眩光等,让人像看起来更好看。但到目前为止,眨眼已经被证明是拍照最难解决的问题之一。然而,Facebook的研究可能会改变这一切,这个研究正在以一种非常令人信服的方式将闭眼替换为睁开的眼睛。

首先,让我们来回顾下“智能绘画”这项技术,当一个程序用其认为属于该空间的元素填充这个空间时,此技术就会被调用。特别是,Adobe通过其“上下文感知填充(context-aware fill)”充分应用这个技术,允许用户无缝地替换不需要的特征元素,例如突出的分支或云,通过很好地模拟该处应有的元素来进行预测和填充。

但有些功能超出了这类工具的替代能力,其中之一就是眼部位置的替换。眼睛的精细度和高度可变的性质,使系统改变或创建这些位置变得更难。现在,Facebook研究团队决定采取措施来攻克这个问题。

Facebook通过一个生成式对抗网络(Generative Adversarial Network,GAN)来解决这个难题,GAN本质上是一个机器学习系统,它试图欺骗自己认为其创作是真实的。在GAN中,系统的一部分学会识别面部表情,而系统的另一部分重复创建基于识别部分反馈的图像,逐渐接近现实图像。

脸书研发新AI工具:让照片中闭眼的人重新睁眼
从左至右:示范图像、源图像、Photoshop睁眼算法、Facebook算法。

在这种情况下,网络接受了训练,以识别和复制令人信服的睁眼图像,但正如你在右边的例子中看到的那样,Photoshop的方法看上去似乎贴在人们的眼睛上,没有考虑与其他图像的一致性。这是因为机器很幼稚,它们没有直觉性理解能力。

Facebook的研究人员所做的就是将示范图像数据包括在内,以显示目标人物睁开眼睛的图像,从中GAN不仅了解到人像的眼睛应该是什么样子,而且还知道目标人物的眼睛该如何塑造,例如如何着色等。

训练的结果是相当真实和令人信服的:没有颜色不匹配或明显的拼接,因为网络的识别部分知道这不是人看起来的样子。

在测试中,人们错误地将虚假的睁眼照片误认为是真实的照片,或者说他们不能确定哪些是真实的,认为这样的被测试者超过了50%。除非观看者知道一张照片被篡改,否则,如果只是在新闻采访中滚动浏览照片,可能也不会特别注意。不过,如果仔细看起来还是有点奇怪。

据Facebook相关研究人员介绍,在某些情况下,此功能仍然会失效,如果一个人的眼睛被头发部分覆盖,或者有时不能正确地重新创建颜色,就会产生奇怪的伪影。目前,研究人员正在解决这个问题。

你可以想象一下,Facebook上的一个自动开眼界工具的用处,它可以检查一个人的其他照片,并用它们作为参考来代替最新的照片。这有点令人毛骨悚然,但这对Facebook来说非常标准,至少它可以挽救一两张合影照片。

(选自:techcrunch 编译:网易智能 参与:nariiy)

关注网易智能公众号(smartman163),为你解读AI领域大公司大事件,新观点新应用。

相关推荐
热点推荐
深圳中秋三岁女童锁车内一天热死?邻居爆料:父母打牌一儿一女

深圳中秋三岁女童锁车内一天热死?邻居爆料:父母打牌一儿一女

娱乐星闻精选
2021-09-22 21:59:00
一男子斥巨资做了一件特殊的衣服,网友:贫穷限制了我的想象力

一男子斥巨资做了一件特殊的衣服,网友:贫穷限制了我的想象力

要闻每日关注
2021-09-21 23:04:04
刚刚!苏炳添宣布重要决定:称自己压力很大,承认严海滨比自己强

刚刚!苏炳添宣布重要决定:称自己压力很大,承认严海滨比自己强

华声体育
2021-09-21 22:59:19
现在全民都在关注二八事件的结果,因为这是正义和邪恶的较量

现在全民都在关注二八事件的结果,因为这是正义和邪恶的较量

要闻每日关注
2021-09-22 07:47:35
“让特朗普重新当总统?”当着所有美国人的面,拜登突然语出惊人

“让特朗普重新当总统?”当着所有美国人的面,拜登突然语出惊人

东方之星V
2021-09-21 23:13:30
《向往》蘑菇屋厕所首曝光!装饰豪华设施齐全,与木板房反差极大

《向往》蘑菇屋厕所首曝光!装饰豪华设施齐全,与木板房反差极大

会火
2021-09-22 18:34:31
华宇软件董事长被刑拘!影响多大?公司发声了……

华宇软件董事长被刑拘!影响多大?公司发声了……

中新经纬
2021-09-21 18:49:11
方媛罕晒全家福庆中秋,被郭富城搂住怀中,表情僵硬被调侃假笑?

方媛罕晒全家福庆中秋,被郭富城搂住怀中,表情僵硬被调侃假笑?

猫眼娱乐官方号
2021-09-22 12:41:12
2018年,刘思齐儿子,女儿纪念主席诞辰125周年,表情严肃凝重

2018年,刘思齐儿子,女儿纪念主席诞辰125周年,表情严肃凝重

资讯沸点
2021-09-23 00:00:14
中国进口日本机床订单8月环比下滑21%:9个月来最低!汽车也减速

中国进口日本机床订单8月环比下滑21%:9个月来最低!汽车也减速

和讯网
2021-09-22 10:19:20
1963年罗荣桓病逝北京,林彪亲自守灵,并写下此生唯一的一副挽联

1963年罗荣桓病逝北京,林彪亲自守灵,并写下此生唯一的一副挽联

竹昂
2021-09-22 20:07:26
李子柒恐将失去账号?业内人士透露:处处吃瘪,比想象中还要惨

李子柒恐将失去账号?业内人士透露:处处吃瘪,比想象中还要惨

喵星娱乐家
2021-09-20 11:21:26
建党币跌破12元,还会继续下跌吗?

建党币跌破12元,还会继续下跌吗?

要闻每日关注
2021-09-21 18:23:58
广西发布领导干部任职前公示

广西发布领导干部任职前公示

930老友记
2021-09-22 23:37:01
五年内不得参加竞选,香港特区政府再次出手:剥夺7名区议员资格

五年内不得参加竞选,香港特区政府再次出手:剥夺7名区议员资格

社会黄金瞳
2021-09-22 17:35:28
女子交3000元押金入职县级医院,结果工作四个月到手工资以为看错

女子交3000元押金入职县级医院,结果工作四个月到手工资以为看错

會飛的魚
2021-09-22 17:57:45
比阿富汗还可怕?又一邻国爆发大战,重炮猛烈开火,全球一片震动

比阿富汗还可怕?又一邻国爆发大战,重炮猛烈开火,全球一片震动

第1集结号
2021-09-21 18:01:17
大乐透摇奖球拿出又重装致开奖延迟 全程高清直播

大乐透摇奖球拿出又重装致开奖延迟 全程高清直播

彩票大师
2021-09-22 10:20:23
欠钱不还!中央终于出文件了 !“酷刑”伺候!

欠钱不还!中央终于出文件了 !“酷刑”伺候!

法律案例库
2021-09-22 20:48:13
起点太高!谢文骏110米栏三连冠,网友想念刘翔:都没人接近13秒

起点太高!谢文骏110米栏三连冠,网友想念刘翔:都没人接近13秒

绿茵猫
2021-09-22 19:47:25
2021-09-23 02:40:49

科技要闻

iPad mini6体验:它就是「年度真香机」

头条要闻

外媒称马克龙同意将联合国五常席位给欧盟 法国回应

头条要闻

外媒称马克龙同意将联合国五常席位给欧盟 法国回应

体育要闻

梅罗接班人?埃托奥:哈兰德是野兽,但姆巴佩就是姆巴佩

娱乐要闻

中秋晚会变修罗场:四对“情敌”

财经要闻

汽车要闻

好饭不怕晚?凯迪拉克首款纯电SUV终来到

态度原创

手机
旅游
家居
公开课
军事航空

手机要闻

iPad 9初体验:容量翻倍芯片升级,性价比更出彩

旅游要闻

甘肃有个县市 避暑的人冷的穿棉裤

家居要闻

重庆236㎡江景豪宅卖1100万 躺在家就能看洪崖洞

公开课

30年前中国专家第一次发射卫星:怕出洋相

军事要闻

穷得用不起了?俄A50预警机成堆报废

×