网易首页 > 网易号 > 正文 申请入驻

Facebook与13所大学合作开发,训练AI为AR眼镜提供更智能服务

0
分享至

编译/VR陀螺

Facebook设想了一个未来,当你戴着增强现实眼镜或其他由人工智能驱动的设备时,你将学会打鼓或做一道新菜。为了使这个未来成为现实,Facebook需要其人工智能系统通过你的眼睛来观察世界。


图源:Getty Images

Facebook的首席研究科学家Kristen Grauman说道:"在这个世界上,我们会有可穿戴设备,通过在正确的时刻提供信息或帮助我们获取记忆,这些设备将使我们在日常生活中受益。”她表示,这项技术最终可以用来分析我们的活动,帮助我们找到丢失的物品,比如我们的钥匙。

这个未来还很遥远,Facebook与雷朋合作推出的智能眼镜就证明了这一点,它在今年9月亮相时并没有AR功能。实现这个未来的部分挑战是训练人工智能系统更好地理解人们拍摄的照片和视频,以便人工智能能够帮助人们记住重要信息。

Facebook表示,它与13所大学和实验室合作,招募了750人,在两年内拍摄了超过2200小时的第一视角视频。参与者居住在英国、意大利、印度、日本、沙特阿拉伯、新加坡、美国、卢旺达和哥伦比亚,他们拍摄了自己从事日常活动的视频,如运动、购物、注视宠物或园艺。他们使用了各种可穿戴设备,包括GoPro相机、Vuzix Blade智能眼镜和ZShades视频录制太阳镜。

从下个月开始,Facebook的研究人员将能够申请访问这个数据宝库。这个名为Ego4D的新项目让我们看到了一家科技公司如何改进AR、虚拟现实和机器人等技术,使它们在我们的日常生活中发挥更大的作用。

这个新项目是在Facebook的动荡时期进行的。在《华尔街日报》发表了一系列关于Facebook的内部研究表明它知道该平台的危害的报道后,这家社交网络巨头面临着来自立法者、倡导团体和公众的审查。Facebook前产品经理Frances Haugen上周在美国国会作证,讲述了她在5月离开该公司前拿走的数千页机密文件的内容。她计划在英国作证,并在不久的将来与Facebook的半独立监督委员会会面。

甚至在Haugen进行披露之前,Facebook的智能眼镜就已经引发了批评者的担忧,他们担心该设备会被用来秘密记录人们。在研究第一人称视角视频的过程中,Facebook表示它解决了隐私问题。设备佩戴者可以查看和删除他们的视频,该公司还模糊了被拍摄的旁观者的脸和车牌。

Facebook表示,作为新项目的一部分,它为研究人员创造了五个基准挑战。这些基准包括情景记忆,因此你知道在什么时候发生了什么事;预测,所以计算机知道你接下来可能会做什么;以及手和物体操作,以了解一个人在视频中正在做什么。最后两个基准是理解视频中谁说了什么,什么时候说的,以及互动中的伙伴是谁。

"这设立了一个标准,只是为了让它开始,"Grauman说道。"这通常是相当强大的,因为现在你将有一个系统的方法来评估数据。"

帮助人工智能理解第一人称视角视频可能具有挑战性,因为计算机通常会从旁观者的第三人称视角拍摄的图像中学习。当你记录自己踢足球或坐过山车时,诸如运动模糊和不同角度的镜头等挑战等问题就会出现。

Facebook表示,它正在考虑将该项目扩展到其他国家。该公司表示,视频片段的多样化很重要,因为如果AR眼镜需要帮助一个人做咖喱或洗衣服,人工智能助手需要了解这些活动在世界不同地区的差异。

Facebook还透露,视频数据集包括在九个国家的73个地点拍摄的各种活动。参与者包括不同年龄、性别和职业的人。


图源:Facebook

COVID-19的爆发也给研究带来了限制。例如,数据集中能看到的更多镜头是烹饪或手工制作等居家活动,而不是公共活动。

与Facebook合作的一些大学包括英国的布里斯托尔大学、美国的乔治亚理工大学、日本的东京大学和哥伦比亚的安第斯大学。

来源:cnet

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
其他车型还得选选,第二代CS55PLUS直接上顶配

其他车型还得选选,第二代CS55PLUS直接上顶配

麻辣车事
2021-11-24 19:31:20
重卡变轻舟,越过万重山

重卡变轻舟,越过万重山

帮宁工作室
2021-11-18 10:30:31
100万元以下,没有任何一款燃油车比路特斯Emira更超值

100万元以下,没有任何一款燃油车比路特斯Emira更超值

网上车市
2021-11-18 11:22:37
【谁是动力王】普通家轿赛道跑直线,自主和合资谁更快?

【谁是动力王】普通家轿赛道跑直线,自主和合资谁更快?

明镜pro
2021-11-17 19:53:06
奥迪sphere系列概念车背后,是一场豪华移动出行史无前例的变革

奥迪sphere系列概念车背后,是一场豪华移动出行史无前例的变革

买车家
2021-11-25 17:47:20
C罗打入点球后,曼联球员和C罗一起“Siu”

C罗打入点球后,曼联球员和C罗一起“Siu”

直播吧
2021-12-03 06:55:15
海外抢锂终局:赣锋锂业4亿美元截胡,宁德时代赚1000万美元离场

海外抢锂终局:赣锋锂业4亿美元截胡,宁德时代赚1000万美元离场

时代周报
2021-11-18 17:19:11
“阜兴系”崩塌:非法集资565亿,461个账户坐庄割韭菜,“富二代”被判无期

“阜兴系”崩塌:非法集资565亿,461个账户坐庄割韭菜,“富二代”被判无期

时代周报
2021-11-23 16:29:55
奥迪引领未来豪华出行 “以人为本”是关键

奥迪引领未来豪华出行 “以人为本”是关键

管老师
2021-11-19 17:51:24
破圈与进化:“隐形巨头”派乐汉堡的制胜之道

破圈与进化:“隐形巨头”派乐汉堡的制胜之道

财经无忌
2021-11-17 15:49:58
“兰达家族”又推力作,广汽丰田锋兰达出道即耀眼

“兰达家族”又推力作,广汽丰田锋兰达出道即耀眼

汽车时尚报
2021-11-20 21:06:29
腾讯终止黎明计划并道歉:风波已停,谣言未止

腾讯终止黎明计划并道歉:风波已停,谣言未止

锌财经
2021-11-20 16:09:26
江汽集团:以安全技术打造竞争优势

江汽集团:以安全技术打造竞争优势

帮宁工作室
2021-11-19 11:18:45
小鹏P7“霸榜”真正原因: 综合产品力环环相扣

小鹏P7“霸榜”真正原因: 综合产品力环环相扣

汽车时尚报
2021-11-26 16:50:09
腾讯网易都不敢做的事,它却做到了!挂机烤火掉神装,能卖上千元

腾讯网易都不敢做的事,它却做到了!挂机烤火掉神装,能卖上千元

17173游戏网
2021-11-12 16:33:06
深耕科技,复盘广发基金费逸年化29%背后的成长路径

深耕科技,复盘广发基金费逸年化29%背后的成长路径

财商侠客行
2021-11-18 20:22:22
尊重现状、促进发展,为中药集采规则点赞

尊重现状、促进发展,为中药集采规则点赞

首条研究院
2021-11-19 11:49:25
梦幻西游网页版:出道即巅峰,全新红色伙伴龙鲤技能详解一览

梦幻西游网页版:出道即巅峰,全新红色伙伴龙鲤技能详解一览

梦幻网页版骨妹
2021-11-19 10:19:51
央行悄悄放水了,这个重磅信号再次出现!

央行悄悄放水了,这个重磅信号再次出现!

智谷趋势
2021-11-16 17:32:52
2021广州车展丨首款纯电动四门轿跑创新BMW i4亮相,宝马诠释性能与电动相结合

2021广州车展丨首款纯电动四门轿跑创新BMW i4亮相,宝马诠释性能与电动相结合

车云网
2021-11-22 00:53:10
2021-12-03 09:56:49
VR陀螺
VR陀螺
关注VR行业热点、趣闻、产业
3091文章数 4836关注度
往期回顾 全部

科技要闻

滴滴:即日起启动在美退市,准备在港上市

头条要闻

雁默:若与台"断交" 洪都拉斯就是第二个阿富汗

头条要闻

雁默:若与台"断交" 洪都拉斯就是第二个阿富汗

体育要闻

朗尼克来了,C罗会失宠么?

娱乐要闻

10版武则天对比 只有刘晓庆是经典?

财经要闻

汽车要闻

宝马新款X7上市 除入门车型全系价格上调5万

态度原创

旅游
本地
房产
亲子
艺术

旅游要闻

德国脱衣扑克大赛 参与者清凉上阵

本地新闻

互联网公司DOTA开战 大厂人均“刀斯林”

房产要闻

入账1777亿,广州全年集中供地收官

亲子要闻

世界上的妈妈各种各样,世界上的爸爸三种模样

艺术要闻

上海图书馆东馆即将试开放