网易首页 > 网易科技 > 网易科技 > 正文

AR行业的大事儿!脸书开源Detectron计算机视觉算法

0
分享至


本文系网易智能工作室(公众号smartman 163)出品。聚焦AI,读懂下一个大时代!

【网易智能讯 1月26日消息】Facebook本周宣布Detectron开放源代码正式向大众公开,该项目也是Facebook基于深度学习框架进行设计的关于计算机视觉对象检测算法平台。该公司表示,开放该项目的动机是加速计算机视觉研究,并且Facebook公司内部团队正在使用该代码进行各种应用测试,其中就包括针对增强现实技术的研究。

在我最近发表的一篇文章中,详细介绍了当今增强现实技术即将面临的三大挑战,在这其中我注意到计算机进行实时对象分类是我们最大的技术难区之一:

不仅仅只观察一个形状,让计算机利用视觉去理解“杯子”的物体含义是一个值得深究的问题。这就是为什么多年以来,我们在看到的增强现实技术演示中发现人们将基准标记附加到观察对象上,从而促进机器与观察物体之间更细致的跟踪和交互。

为什么难?我们要提到的第一个技术挑战是如何进行视觉分类。我们了解到,杯子有数千种形状,大小,颜色和纹理。有些杯子有特殊的属性,它们是为了特殊目的而制造的(如烧杯),这意味着它们在不同的地方和环境中有多种多样的用法。

让我们来想象关于如何写一个能帮助计算机理解所有我们在上面提到的这些概念的算法有多难,而且这只是为了能够在多个杯子中辨认出其中一个目标的杯子。我们还可以想想,关于写一个能够帮助电脑区分杯子和碗的代码是另一项需要完成的挑战。


我还谈到了为什么“深度学习”技术是实时对象分类问题的一个潜在的解决方案,它能够做到“培训”一台计算机来解释它所看到的,而不是用人工编程不断的一行行进行检测。 Facebook本周已经开发出了他们自创的对象检测算法,这可能会加速系统的开发,使系统能够进行实时对象分类,从而使增强现实技术真正得到广泛使用。

关于增强现实技术与我们周围物体实际相互作用的方式,在粗略地了解附近特定的场景之前并不用针对特定环境进行预先编程。例如,如果您戴着AR眼镜,并希望能够将烤箱温度投影到烤箱上方,然后还需要将冰箱中需要拿出来的食物的列表在AR眼镜中显示出来,则您的眼镜需要分辨烤箱和冰箱的样子。鉴于各种烤箱和冰箱以及它们生产地方的不同和放置位置的不同,这是一项极具挑战性的任务。

Facebook的人工智能研究团队最近一直在研究计算机视觉对象检测问题,并且它们正在尝试通过深度学习使计算机能够得出关于场景中存在什么物体的结论。在Facebook宣布基于Caffe2深度学习框架的对象检测算法开发的被称为Detectron的平台向大众开放后,现在任何人都可以在GitHub上利用该算法进行试验。 Facebook公司希望Detectron平台将使世界各地的计算机视觉研究人员能够尝试并不断改进最新的技术。

我们从项目的GitHub主页信息了解到,“Detectron的目标是为物体检测研究提供高质量,高性能的代码库。它的设计目的是通过灵活的方式来支持关于新颖技术的快速应用和评估的研究。”

该算法能通过检查视频输入信息,从而猜测离散对象来构成对应场景。诸如检测和识别人与物体相互作用(Gkioxari等)的研究项目已经使用了Detectron作为了解人类在环境中的行为的基础平台,该项目朝着帮助计算机充分理解我们正在做的事情的正确方向迈出了正确的步伐,从而使机器观察以后能够即时提供有价值的信息。

除了进行人工智能技术研究之外,Detectron也被Facebook内部广泛使用。该公司在Detectron宣布开放的消息中写道:“我们团队使用这个平台来培训各种应用的定制模型,其中包括增强现实技术和检查数据信息完整性的相关应用。”

具体哪些团队将使用Detectron应用增强现实技术并未公布,但是我们现在知道Oculus很可能会使用它,因为他的首席科学家Michael Abrash最近就增强现实技术将如何以及何时改变我们的生活发表了长篇演讲。

(选自:roadtovr编译:网易见外 参与:付曾)

关注网易智能公众号(smartman163),获取人工智能行业最新报告。

相关推荐
热点推荐
形势突变,大批售台战机被扣押,美军败局已定,赖清德输个精光

形势突变,大批售台战机被扣押,美军败局已定,赖清德输个精光

沧海旅行家
2025-12-14 23:36:58
逆转小胜,上海男篮缺少磨合,张镇麟10分下半场爆发 双外援38+16

逆转小胜,上海男篮缺少磨合,张镇麟10分下半场爆发 双外援38+16

替补席看球
2025-12-14 21:36:57
61岁演员何晴离世!同学曝死因是胶质瘤,父亲也因脑部疾病离世

61岁演员何晴离世!同学曝死因是胶质瘤,父亲也因脑部疾病离世

娱乐圈圈圆
2025-12-14 12:44:25
39岁前皇马队长加入AC米兰?莫德里奇亲自招募,阿莱格里想要他

39岁前皇马队长加入AC米兰?莫德里奇亲自招募,阿莱格里想要他

里芃芃体育
2025-12-15 00:15:09
保时捷三姐妹跳槽尊界!给国产豪车长脸了!

保时捷三姐妹跳槽尊界!给国产豪车长脸了!

品牌头版
2025-12-12 10:28:50
9国达成共识,日本等来救兵!越南下达禁令,中国稀土王牌告急

9国达成共识,日本等来救兵!越南下达禁令,中国稀土王牌告急

现代小青青慕慕
2025-12-14 13:08:09
全体注意,最新预测来了!明天周一A股大概率会这样走!

全体注意,最新预测来了!明天周一A股大概率会这样走!

一担金
2025-12-14 22:28:32
准新郎北海道登山被熊咬死! GPS手表纪录全过程,尸体遭拖行百米

准新郎北海道登山被熊咬死! GPS手表纪录全过程,尸体遭拖行百米

环球趣闻分享
2025-12-14 14:50:05
万岁山演员冻成冰雕,宣传的励志又翻车了,健康和敬业哪个重要?

万岁山演员冻成冰雕,宣传的励志又翻车了,健康和敬业哪个重要?

你食不食油饼
2025-12-14 17:02:48
何家劲发文悼念何晴,廖京生没有和何晴结婚,只是和许亚军长得像

何家劲发文悼念何晴,廖京生没有和何晴结婚,只是和许亚军长得像

小娱乐悠悠
2025-12-14 15:38:18
雷军再陷争议:运损车改叫“准新车”,网友炸了

雷军再陷争议:运损车改叫“准新车”,网友炸了

西门老爹
2025-12-14 13:59:13
国内“30万元落地”汽车冠军:断崖式领先传统豪强,月销4万多台

国内“30万元落地”汽车冠军:断崖式领先传统豪强,月销4万多台

柳先说
2025-12-12 19:15:51
拿600万,战鱼腩仅得2分+俱乐部杯哑火,球迷怒了:快送回老东家

拿600万,战鱼腩仅得2分+俱乐部杯哑火,球迷怒了:快送回老东家

南海浪花
2025-12-14 11:46:58
来了!特斯拉宣布推出电池延保服务,10 年内免费换电池

来了!特斯拉宣布推出电池延保服务,10 年内免费换电池

XCiOS俱乐部
2025-12-14 11:46:47
特朗普做出决定,6国不救日本,中方清点在日公民,高市彻底绝望

特朗普做出决定,6国不救日本,中方清点在日公民,高市彻底绝望

闻识
2025-12-13 16:10:02
随着葡萄牙体育6-0狂胜,葡超最新积分榜:穆帅率队距离榜首近2位数

随着葡萄牙体育6-0狂胜,葡超最新积分榜:穆帅率队距离榜首近2位数

侧身凌空斩
2025-12-14 08:19:34
3-2!54岁埃梅里震撼英超:率队两度扳平后绝杀 9连胜+近11轮10胜

3-2!54岁埃梅里震撼英超:率队两度扳平后绝杀 9连胜+近11轮10胜

我爱英超
2025-12-15 00:11:39
WTT总决赛大结局!3次致敬樊振东,张本智和首度封王,王曼昱卫冕

WTT总决赛大结局!3次致敬樊振东,张本智和首度封王,王曼昱卫冕

知轩体育
2025-12-15 00:06:25
要加盟马刺吗?保罗现场观看马刺战雷霆,和文班亚马热情拥抱!

要加盟马刺吗?保罗现场观看马刺战雷霆,和文班亚马热情拥抱!

爱体育
2025-12-14 23:49:16
傅作义亲手放走5个蒋介石嫡系将领,几十年后才知他保全的是什么

傅作义亲手放走5个蒋介石嫡系将领,几十年后才知他保全的是什么

睡前讲故事
2025-12-09 13:06:03
2025-12-15 01:23:00

科技要闻

当人形机器人有了App Store,宇树在赌什么

头条要闻

不惜"硬刚"特朗普也要打下去 泰柬冲突2.0比7月更猛烈

头条要闻

不惜"硬刚"特朗普也要打下去 泰柬冲突2.0比7月更猛烈

体育要闻

马刺终结雷霆:以勇猛,以文班亚马

娱乐要闻

何晴生前最大谣言!没有再婚嫁廖京生

财经要闻

重大违法强制退市!10人被判刑

汽车要闻

硬核敞篷巴士?掷弹兵Game Viewer 2026年初量产

态度原创

艺术
房产
游戏
旅游
公开课

艺术要闻

六年磨一“扇”!上海大歌剧院亮灯,年内竣工!

房产要闻

车程5分钟价差300万 海棠湾的这个盘要火!

“一念神魔”资料片正式开启!穿上新衣闹天宫,三界提前过年?

旅游要闻

运河新韵|世界最长运河沿线文旅火热

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版
×