网易首页 > 网易科技 > 智能硬件 > 正文

来看看微软最新的全息传动HoloPortation!

0
分享至

(原标题:还在谈HoloLens?来看看微软最新的全息传动HoloPortation!)

文 | 海中天

微软的研究者开发了一些新玩意,它可以将《星球大战》R2-D2机器人的一些卓越技能带到到我们的日常生活中。这个技能叫作“全息传送(Holoportation)”,它可以永远改变我们远距离沟通的方式。微软提供一段演示视频介绍新技术。

据项目主管Shahram Izadi透露,最开始他们只是想缓解思乡病。Shahram Izadi的剑桥(英国)团队专注于用3D传感器技术、机器学习来解决下一代计算问题,花了两年半时间,团队才和华盛顿Redmond 的HoloLens团队融为一体。Izadi已为人父,视频中出现的女孩是他的女儿,当挑战下一站的机会到来时,他转向了“沟通”——沟通可以大大改变个人生活和专业生活。

“我有两个小孩,我真心觉得我们无法用喜欢的方式有效沟通。” Izadi说,“像视频会议、电话这样的工具对小孩没有吸引力,它和面对面的沟通不一样。”

正因如此,团队才开发了类似“全息传送”的东西,它将活灵活现的人物全息图像投射到另一个房间,这个房间的人可以与实时图像中的人物互动,好像他们真的在那里一样。通过这样的方式,技术实际上超越了《星球大战》中的全息图像,《星球大战》将预先录制的信息以全息形式播放。“全息传送”也能做到,但是它的真正魔力在于可以传输实况全息图。

我可以带你去那里

“全息传送”系统首先从高质量3D摄像头开始,它被安置在特定的空间里。你可以将它们视为增强版的Kinect摄像头。“Kinect的设计初衷是追踪人物的骨架。” Izadi说,“我们的设计可以追踪人物身体的高质量细节,可以重建每一个特征。正因如此,我们必须重新思考3D传感器。”

当摄像头抓取到了每一个可能的视角图像,定制软件会将图像合成完全成型的3D模型。Izadi说整个过程会持续进行,因为数据框架越多模型质量越高。当数据不断累积就可以形成栩栩如生的全息图,哪里安装了接收系统(比如HoloLens),图像就可以传输到那里。转化的速度相当快。

Izadi还说:“我们希望能在很短的时间窗口完成所有处理过程,大约只要33毫秒就可以处理完所有摄像头收集的数据,大体来说是这样的;它还可以创造一个时空模型,然后以串流的形式传输数据。” Izadi的团队利用Nvidia GPU来抓取数据,这些显卡全是高端显卡,它们会组成“军队”执行任务。

等等,你是不是说必须瞬间传输大量的数据?没错。Izadi指出,“全息传送”处理过程会产生海量的数据,不单如此,许多流视频编解码器也对3D图像不太友好。数据必须压缩,在Izadi的项目中需要将GB数据压缩成MB,要实现“全息传送”这一步很重要。

让世界匹配

要让“全息传送”广泛应用于日常生活,还有一些障碍需要跨越。

观看演示视频你可能会发现,在两个房间中微软使用了一样的家具,因为两个房间的家具是重叠的,交互会流畅许多,当人走过桌子时也会流畅许多。其实还有一个更直接的解决方案:训练摄像头,让它只对焦你想“传送”的目标,而不是整个房间。

“用户可能会做出决定:不复制任何家具。”Izadi说,“我们通过对背景进行分割来满足要求,当你抓取放置家具的房间时,它只会捕捉进入房间的近景目标并将它转化成流视频。”你可以对家具的各部分进行战略性组合,让两个房间更匹配。

举个例子,让祖父母两个人坐在自己的沙发上,然后对他们进行“全息传送”,让二人共度圣诞的早晨。不需要让他们漂浮在空中相遇,只需要调整他们坐着的全息图——坐在各自客厅沙发上的全息图——就行了。

就目前来说,Izadi团队深知潜在的空间问题很难解决,但是他们仍然认为这是一个机会,Izadi认为项目可以最终变成消费设备。我们现在已经有了专用家庭影院,为什么不会出现专用家庭“全息传送”房间?

“项目的终极目标和愿景就是精炼系统,让它变得像家庭影院系统一样简单。” Izadi表示,“你走进房间,那里安装了许多类似扬声器一样的单元,组装的方式恰如营造环绕声一样,只是它给你带来的是环绕视觉。”

要达成目标还很遥远,可能还需要好几年,Izadi预计我们将会看到“全息传送”装备出现在会议室内。尽管设备昂贵(需要很多的摄像头、GPU),但是Izadi提醒我们注意一年的全球商务旅行开支高达1万亿美元。

是不是很有趣?尽管Izadi的团队和HoloLens密切合作,但是他们的系统并不偏爱强大的硬件。在信息的接收端,你只需要一台VR或者AR头盔就行了。

“对于所谓的 观看器 技术,我们还有很多不清楚的地方。” Izadi说,“很显然,HoloLens的使用场景有一些独特之处,我们会尽可能利用更多的显示技术来发挥系统的优势。”

相关推荐
热点推荐
终于出手!中国国防部重磅发声,直接点名美国,这一次不再留情面

终于出手!中国国防部重磅发声,直接点名美国,这一次不再留情面

振雨在线
2024-10-03 11:52:25
起风了,网友根本不在乎公职人员的安全,反而质疑不断,咋回事?

起风了,网友根本不在乎公职人员的安全,反而质疑不断,咋回事?

眼光很亮
2024-09-12 13:01:24
上海发起入秋冲刺,节后放晴、昼夜温差拉大

上海发起入秋冲刺,节后放晴、昼夜温差拉大

纵相新闻
2024-10-06 14:20:06
小米 SUV 汽车谍照曝光,采用无边框车门设计

小米 SUV 汽车谍照曝光,采用无边框车门设计

IT之家
2024-10-06 20:19:14
世界最长海底高铁隧道开工了

世界最长海底高铁隧道开工了

星世界侃
2024-10-07 00:22:31
郭靖死后,黄蓉成了谁的夫人?把她三个孩子的名字倒念一遍就懂了

郭靖死后,黄蓉成了谁的夫人?把她三个孩子的名字倒念一遍就懂了

耳东文史
2024-10-07 00:07:02
比亚迪版“埃尔法”亮相!车长超5米1,配航空座椅,搭载1.5T插混

比亚迪版“埃尔法”亮相!车长超5米1,配航空座椅,搭载1.5T插混

小史谈车
2024-10-06 21:52:40
浙大女教授亲手掐死12岁儿子,儿子死前:妈妈,我很爱你!

浙大女教授亲手掐死12岁儿子,儿子死前:妈妈,我很爱你!

华人星光
2024-10-01 16:16:47
沫沫事件新情况,确认敲诈小杨690万,已支付90万前男友拿走37万

沫沫事件新情况,确认敲诈小杨690万,已支付90万前男友拿走37万

辣条小剧场
2024-10-07 10:53:46
中甲26轮积分榜:云南提前4轮冲超,大连输球,重庆力压广州排第3

中甲26轮积分榜:云南提前4轮冲超,大连输球,重庆力压广州排第3

中超伪球迷
2024-10-06 21:58:58
新西兰军舰沉没引发群嘲,1亿刀5年报废;国营媒体启动“减成本”

新西兰军舰沉没引发群嘲,1亿刀5年报废;国营媒体启动“减成本”

土澳的故事
2024-10-07 08:44:06
河南一新娘哥嫂多要18万彩礼未果,亲友爬婚车阻拦?当地:细节有出入,已介入处置

河南一新娘哥嫂多要18万彩礼未果,亲友爬婚车阻拦?当地:细节有出入,已介入处置

极目新闻
2024-10-06 13:44:30
美国人:中国发明量子卫星的不是人!

美国人:中国发明量子卫星的不是人!

芯怡飞
2024-10-06 11:00:27
初次见网友能有多尴尬?网友经历笑到床抖!原来女生也会这么主动

初次见网友能有多尴尬?网友经历笑到床抖!原来女生也会这么主动

有趣的火烈鸟
2024-10-07 09:05:11
华为和联发科谈崩,华为想颠覆手机行业专利模式,太难了

华为和联发科谈崩,华为想颠覆手机行业专利模式,太难了

互联网.乱侃秀
2024-10-07 09:59:43
阿丘尔不在线,莫兰德发文苦练,联赛的专业与操守

阿丘尔不在线,莫兰德发文苦练,联赛的专业与操守

室内设计师阿喇
2024-10-07 10:22:17
广东女司机酒后叫代驾,代驾上车后惊讶:你的车怎么没方向盘

广东女司机酒后叫代驾,代驾上车后惊讶:你的车怎么没方向盘

倩倩生活说
2024-10-07 06:05:24
被逆转丢冠,马龙为何面带笑容?和方博对话曝光,让人心疼

被逆转丢冠,马龙为何面带笑容?和方博对话曝光,让人心疼

东球弟
2024-10-07 09:01:56
港星刘江的言论再次成为全国热搜,广东网友:早就已经听不惯了

港星刘江的言论再次成为全国热搜,广东网友:早就已经听不惯了

观察鉴娱
2024-10-05 13:58:52
台专家不但看破,还要说破:大陆如果给台断水断电,3天内就大乱

台专家不但看破,还要说破:大陆如果给台断水断电,3天内就大乱

千里持剑
2024-10-06 13:02:14
2024-10-07 12:46:44

科技要闻

欧洲动力电池“全村的希望”深陷困境

头条要闻

24岁女幼师在出租屋遇害 女室友因撞见行凶者也被杀

头条要闻

24岁女幼师在出租屋遇害 女室友因撞见行凶者也被杀

体育要闻

太阳逆转湖人 詹姆斯布朗尼父子同台

娱乐要闻

冲上热搜!刀郎广州演唱会座无虚席!

财经要闻

上交所取消集合竞价?最新专业解读!

汽车要闻

豹5激光雷达版曝光 或搭载华为乾崑ADS 3.0

态度原创

亲子
旅游
时尚
教育
公开课

亲子要闻

“回家奶奶一个都不会舍得吃”,孙子想吃虾 不停地搖着奶奶的胳膊

旅游要闻

500多名游客被困!泰国清迈遭50年最大洪灾

今年秋季流行“微喇裤”,学会这些搭配技巧,轻松变长腿女神

教育要闻

3次“变格”带来裂变式成长,她从乡村女教师成长为特级教师

公开课

眼花失眠抽筋,你的肝该调调了

无障碍浏览 进入关怀版
×