网易首页 > 网易科技 > 网易科技 > 正文

AR行业的大事儿!脸书开源Detectron计算机视觉算法

0
分享至


本文系网易智能工作室(公众号smartman 163)出品。聚焦AI,读懂下一个大时代!

【网易智能讯 1月26日消息】Facebook本周宣布Detectron开放源代码正式向大众公开,该项目也是Facebook基于深度学习框架进行设计的关于计算机视觉对象检测算法平台。该公司表示,开放该项目的动机是加速计算机视觉研究,并且Facebook公司内部团队正在使用该代码进行各种应用测试,其中就包括针对增强现实技术的研究。

在我最近发表的一篇文章中,详细介绍了当今增强现实技术即将面临的三大挑战,在这其中我注意到计算机进行实时对象分类是我们最大的技术难区之一:

不仅仅只观察一个形状,让计算机利用视觉去理解“杯子”的物体含义是一个值得深究的问题。这就是为什么多年以来,我们在看到的增强现实技术演示中发现人们将基准标记附加到观察对象上,从而促进机器与观察物体之间更细致的跟踪和交互。

为什么难?我们要提到的第一个技术挑战是如何进行视觉分类。我们了解到,杯子有数千种形状,大小,颜色和纹理。有些杯子有特殊的属性,它们是为了特殊目的而制造的(如烧杯),这意味着它们在不同的地方和环境中有多种多样的用法。

让我们来想象关于如何写一个能帮助计算机理解所有我们在上面提到的这些概念的算法有多难,而且这只是为了能够在多个杯子中辨认出其中一个目标的杯子。我们还可以想想,关于写一个能够帮助电脑区分杯子和碗的代码是另一项需要完成的挑战。


我还谈到了为什么“深度学习”技术是实时对象分类问题的一个潜在的解决方案,它能够做到“培训”一台计算机来解释它所看到的,而不是用人工编程不断的一行行进行检测。 Facebook本周已经开发出了他们自创的对象检测算法,这可能会加速系统的开发,使系统能够进行实时对象分类,从而使增强现实技术真正得到广泛使用。

关于增强现实技术与我们周围物体实际相互作用的方式,在粗略地了解附近特定的场景之前并不用针对特定环境进行预先编程。例如,如果您戴着AR眼镜,并希望能够将烤箱温度投影到烤箱上方,然后还需要将冰箱中需要拿出来的食物的列表在AR眼镜中显示出来,则您的眼镜需要分辨烤箱和冰箱的样子。鉴于各种烤箱和冰箱以及它们生产地方的不同和放置位置的不同,这是一项极具挑战性的任务。

Facebook的人工智能研究团队最近一直在研究计算机视觉对象检测问题,并且它们正在尝试通过深度学习使计算机能够得出关于场景中存在什么物体的结论。在Facebook宣布基于Caffe2深度学习框架的对象检测算法开发的被称为Detectron的平台向大众开放后,现在任何人都可以在GitHub上利用该算法进行试验。 Facebook公司希望Detectron平台将使世界各地的计算机视觉研究人员能够尝试并不断改进最新的技术。

我们从项目的GitHub主页信息了解到,“Detectron的目标是为物体检测研究提供高质量,高性能的代码库。它的设计目的是通过灵活的方式来支持关于新颖技术的快速应用和评估的研究。”

该算法能通过检查视频输入信息,从而猜测离散对象来构成对应场景。诸如检测和识别人与物体相互作用(Gkioxari等)的研究项目已经使用了Detectron作为了解人类在环境中的行为的基础平台,该项目朝着帮助计算机充分理解我们正在做的事情的正确方向迈出了正确的步伐,从而使机器观察以后能够即时提供有价值的信息。

除了进行人工智能技术研究之外,Detectron也被Facebook内部广泛使用。该公司在Detectron宣布开放的消息中写道:“我们团队使用这个平台来培训各种应用的定制模型,其中包括增强现实技术和检查数据信息完整性的相关应用。”

具体哪些团队将使用Detectron应用增强现实技术并未公布,但是我们现在知道Oculus很可能会使用它,因为他的首席科学家Michael Abrash最近就增强现实技术将如何以及何时改变我们的生活发表了长篇演讲。

(选自:roadtovr编译:网易见外 参与:付曾)

关注网易智能公众号(smartman163),获取人工智能行业最新报告。

相关推荐
热点推荐
具俊晔回韩国一直不回,疑似与S妈闹掰,丈夫娘嫌弃女婿不能养家

具俊晔回韩国一直不回,疑似与S妈闹掰,丈夫娘嫌弃女婿不能养家

七阿姨爱八卦
2024-04-25 22:54:25
一场“吃肉”戏,扯下了杨幂最后的“遮羞布”

一场“吃肉”戏,扯下了杨幂最后的“遮羞布”

娱乐圈笔娱君
2024-04-25 16:10:31
江西记者潜入躺采采耳店,揭开采耳内幕,肮脏荒唐远超你想象

江西记者潜入躺采采耳店,揭开采耳内幕,肮脏荒唐远超你想象

纪实录
2024-04-15 21:00:52
我国“六大鹰派人物”有多狠?霸气发言“灭”日本,直接硬刚老美

我国“六大鹰派人物”有多狠?霸气发言“灭”日本,直接硬刚老美

战域笔墨
2024-04-27 00:25:39
俄罗斯成了冤大头:比利时向乌克兰转让F-16战机,转让费由俄支付

俄罗斯成了冤大头:比利时向乌克兰转让F-16战机,转让费由俄支付

飞狼
2024-04-27 21:14:59
乌军撤回全部“艾布拉姆斯”!俄军搞“龟版”坦克值不值得?

乌军撤回全部“艾布拉姆斯”!俄军搞“龟版”坦克值不值得?

鹰眼Defence
2024-04-27 17:48:26
纪实:女子给男子炫耀私处纹身,男子看后强奸女子,女子:太猛了

纪实:女子给男子炫耀私处纹身,男子看后强奸女子,女子:太猛了

北城小畅谈
2024-04-07 13:29:03
李小璐10岁女儿模样大变,欧式双眼皮、锥子下巴比妈还夸张

李小璐10岁女儿模样大变,欧式双眼皮、锥子下巴比妈还夸张

影苏爱时尚
2024-04-28 11:04:14
为啥中国人不喜欢穿西装?看完网友分享,难怪别人以为我是销售!

为啥中国人不喜欢穿西装?看完网友分享,难怪别人以为我是销售!

室内设计师阿喇
2024-04-27 22:47:42
20件让人眼界大开的逆天文物,一个比一个让人想不到

20件让人眼界大开的逆天文物,一个比一个让人想不到

牛马搞笑
2024-04-27 22:29:18
兄弟姐妹“亲不亲”,主要取决于3个人,很准!

兄弟姐妹“亲不亲”,主要取决于3个人,很准!

细语
2024-04-28 00:20:02
美国迅速宣布!

美国迅速宣布!

环球时报新闻
2024-04-27 12:13:37
哈匪首领辛瓦尔爬出地道了,以色列总统:战争要由他结束!

哈匪首领辛瓦尔爬出地道了,以色列总统:战争要由他结束!

娱宙观
2024-04-25 23:37:58
美国想将中国逐出巴黎奥运,中国如何应对?

美国想将中国逐出巴黎奥运,中国如何应对?

宝哥精彩赛事
2024-04-23 15:06:02
你有什么秘密是打死不能让另一半知道的?看网友评论引起万千共鸣

你有什么秘密是打死不能让另一半知道的?看网友评论引起万千共鸣

户外阿崭
2024-04-28 06:41:26
复旦44岁博士与35岁女硕士结婚,2个月后才知妻子真实身份

复旦44岁博士与35岁女硕士结婚,2个月后才知妻子真实身份

莉雅细细谈
2024-04-23 20:16:02
来了,AC米兰!曝伊布批准签约新主帅!8折签约24球射手

来了,AC米兰!曝伊布批准签约新主帅!8折签约24球射手

头狼追球
2024-04-28 10:22:59
肝脏最爱的9种食物,建议春天每天吃一点养肝降脂,千万别心疼钱

肝脏最爱的9种食物,建议春天每天吃一点养肝降脂,千万别心疼钱

斯佳丽的小厨房
2024-04-25 07:00:09
限期180天,美要求中国军工企业退出俄市场,否则就全面封锁制裁

限期180天,美要求中国军工企业退出俄市场,否则就全面封锁制裁

环球Talk
2024-04-23 23:47:26
再见广厦!曝孙铭徽或3换1离队,青岛大将或加盟

再见广厦!曝孙铭徽或3换1离队,青岛大将或加盟

条条爱侃球
2024-04-27 22:31:41
2024-04-28 15:56:49

科技要闻

马斯克周日意外来华,目前或已身在北京

头条要闻

乌多地遭袭击 泽连斯基:至少还需7套"爱国者"防空系统

头条要闻

乌多地遭袭击 泽连斯基:至少还需7套"爱国者"防空系统

体育要闻

赢了!詹皇末节14分制胜咆哮 压力给到KD

娱乐要闻

张杰谢娜发文为何炅庆生,亲如家人!

财经要闻

日元“崩”了!影响多大?

汽车要闻

5月上市/智能化丰富 海狮 07EV正式到店

态度原创

房产
亲子
教育
时尚
手机

房产要闻

海南最新房价出炉,三亚跌价最猛!

亲子要闻

女孩嘴部肿胀似“香肠”般,家长发现后立即带其就医,经检查是虫子咬的

教育要闻

基本立体图形(第2课时)圆柱、圆锥、圆台之间的关系

夏季穿搭要清爽也要高级!借鉴这些搭配技巧,优雅减龄又显瘦

手机要闻

荣耀Magic6首销第一季度出货量暴涨 超上代两季度之和

无障碍浏览 进入关怀版
×