苹果新专利曝光：可直接实现抠像合成的MR头戴设备

看日报是个好习惯。

LG U+AR/VR用户数超60万，占5G用户数比例超过50%

VR陀螺8月10消息，近日，韩国三大运营商发布2020年Q2财报。财报显示，截至Q2韩国整体5Ｇ用户渗透率已达到14%，LG U+以接近16%的5Ｇ渗透率排名前列。预期到2020年底，韩国5Ｇ用户的渗透率将达到25%，加速趋势明显。

SKT、KT和LG U+都把发展VR/AR业务作为5G服务的主阵地。截至2019年底，LG U+的AR/VR用户数已超过60万，占5G用户数的比例超过50%；AR/VR片源数量从5G商用初期的600部增加到4000多部，用户观看时常显著提升。

据悉，LG U+除了基于5G服务为大众带去VR/AR体验，另一方面也通过输出VR/AR内容变现。过去10年，LG U+与中国、中国香港以及日本运营商签约输出内容，累计合同金额超1000万美金，以此延展其5G服务商业模式。

今年6月，LG U+与台湾签约VR/AR内容输出合同。同时还有超30家运营商正在与其洽谈VR/AR内容的输出以及相关的5G服务项目。

此外，LG U+也将VR/AR内容输出的路径扩展到TO B领域，在智能港口，智慧工厂方面已经施行落地方案，并在进一步拓展其业务涉及的范畴。

Oculus Unity和UE4的SDK不再支持Oculus Go

VR陀螺8月10日消息，在最新版本的Oculus Unity & Unreal整合中，Facebook不再支持Oculus Go。

Oculus Go于2018年5月推出，是Facebook的第一款独立头显。这款设备售价199美元，主要用于浸入式视频和传统媒体的嵌入式消费。今年1月，Facebook从其企业产品中移除了Go，并在6月停止向消费者销售该产品，并宣布不再推出3DoF虚拟现实产品。

这意味着Unity和Unreal Oculus集成版本的v19不支持Go，这可能会导致开发人员停止更新Go版本。开发者仍然可以使用v18来开发Go，但是Oculus Go商店将在12月停止接受应用程序更新和新应用程序。

3DoF交互:难以适应市场?

Go主打的媒体观看用例主要围绕着它的无线性、良好的分辨率体验和它的无局限性——这是其他主要头显都没有的。Go只能追踪玩家头部的旋转，而不能追踪玩家的位置。如果玩家向前、向后或向一边倾斜，整个世界就好像依附在你的头上一样移动。这是一种不舒服的感觉，会让一些人感到恶心。

但是，在Go的开发引擎被弃用的背后，更有可能的是它的控制器限制了整个设备的发展路径。3DoF的操控手柄，这意味着它是一个虚拟的激光笔，而不是虚拟的手。Oculus移动核心SDK的第19版并不反对对Go的支持，该SDK是由本地android Quest应用程序或开源引擎的开发者使用的。

Oculus Unity和Unreal SDK的集成为开发者提供了大量可修改的助手脚本、资产和示例。Facebook对虚拟现实体验中空间设计的看法和理解随着时间推移而改变，这让Go的操作方式可能会碰到一些底层方面的问题，比如它根本不适合锁定在空间某处的单个物体，并围绕其进行自由移动和交互的方法。

几乎所有的VR Go应用都是由Unity或Unreal制作的，所以开发者可能会选择不再发布Go版本的更新。Facebook在去年年底退出了其Rooms社交服务，并表示将在Rift平台和Quest上支持即将推出的Horizon社交网络服务，并称“完全的交互性是Facebook Horizon体验的核心。”

2014年的三星Gear VR和2018年的Go对3DoF VR内容的探索充满热情，而Quest的成功似乎意味着3DoF在Facebook未来的VR计划中已经没有了一席之地。

天翼云VR未来星推官 开启5G+VR梦幻之旅

2020年是5G高速发展的一年，也是VR蓬勃发展的一年， 随着5G与VR在多个领域“成功牵手”，VR产业在加速普及和商用落地方面迎来发展新机遇。天翼云VR作为中国电信在5G时代布局的重要云VR内容平台，承载着将VR传递给普通消费者的重要使命。

为了进一步推动VR产业的发展，让更多人了解VR、体验VR，2020年8月13日，中国电信天翼云VR将联合千万粉丝短视频大号"VR玩家一号”举办“天翼云VR未来星推官 ”线上虚拟云签约仪式，同时，还将在抖音、快手平台推出#小V未来星推官#招募计划。

据悉，在本次签约仪式上，天翼云VR将特邀“VR玩家一号”成为天翼云VR产品“5G+VR未来星推官”，VR玩家一号作为VR行业的风向标，将率先体验天翼云VR推出的“观影神器”小V一体机和天翼云VR平台的各种内容应用。同时，双方还将充分整合资源，发挥整体优势，展开深度合作，携手共推5G+VR娱乐新体验，给用户带来更多更好的VR内容和体验。

值得一提的是，本次签约仪式将首次采用3D虚拟与真人结合的线上直播形式进行发布，双方负责人将首先以3D虚拟人物的形象呈现在观众面前，在虚拟世界中，携手签约，并展开面对面交流，随后，还会再切换到真实世界中进行互动，通过这种虚实结合、耳目一新的签约方式，打破现实所带来的局限，让更多屏幕前的观众朋友们共同见证这一历史新的时刻，率先开启5G时代签约新方式！

为了号召更多人进入VR的世界，享受VR带来的全新娱乐体验，本次发布会上，双发还将发起#小V未来星推官#招募计划。至于本次活动的具体内容和参与方式，双方负责人会在签约仪式当天亲自为屏幕前的观众揭晓。

据了解，天翼云VR还将在当天重磅公布未来星推官联盟计划，邀请更多行业伙伴加盟成为天翼云5G+VR星推官，天翼云VR也将不断更新VR产品和平台内容，进一步推动VR落地，持续提升用户体验，让更多用户能够领略到VR带来的无穷魅力。

如果你也想体验VR带来的超沉浸式全景娱乐体验，那就跟着天翼云VR和“VR玩家一号”轻松玩转VR，开启不一样的5G娱乐生活，8月13日下午14:00，“天翼云VR”APP和快手直播平台，下午15:00，抖音直播平台，在线播出本次天翼云VR“5G+VR未来星推官”虚拟云签约仪式，更多精彩，尽情期待！

香港科技大学研发团队推出无人机全息AR控制系统

从理论上讲，控制飞行的无人机几乎就像是在驾驶直升机，但用户并不能真的像驾驶直升机那样在驾驶室控制无人机，因此这使得用户很难看到无人机相对于各种环境障碍的位置。人们对控制无人机的视觉是二维的，并依赖于操纵杆和摄像机。

上周，香港科技大学的研究人员Shaojie Shen 和 Chuhao Lio公布了一项新颖而有趣的创新技术，该技术使用全息增强现实硬件生成实时3D地形图，并使无人机飞行员可以简单地将已经可视化的目标指向任何目标以进行操控。

全息界面使用了多种技术来进行渲染。为了显示，微软 HoloLens头显以彩色体素贴图的形式生成AR内容，用户可以从任何角度进行查看。它通过自主无人机的深度摄像机以及实时位置数据来提供信息。该系统为操作员提供了实时、具有高度空间感的环境海拔高度和深度，并且使用户可以很容易地从第三人称视角看到无人机并重新定位。

HoloLens头显随后将命令反馈给无人机，并通过将佩戴者的手势和注视点变为类似点击的控件来确定其在全息图内的下一个目标。随后，自主无人机可以在移动3D地图的同时更新到新位置。

但是，由于带宽限制，该无人机将仅能向增强现实界面提供3D地图数据，并且不会提供随附的第一人称视频。

研究人员团队仍有一些方法可以部署全息无人机控制系统。无人机的数据最初是在室内测试空间中通过Wi-Fi共享的，但对于室外应用，一旦5G网络超出了其当前的无人机限制阶段，就有可能使用低延迟的5G蜂窝连接。研究人员指出，由于第一组测试人员的“AR视野非常有限”，因此效果并不理想。即将推出的HoloLens2 AR头显可以解决这个问题。由于先前测试人员对增强现实硬件不熟悉，所以研究团队可能要求第一组测试人员进行练习以更加精通3D定位，这种情况可能也会出现在不完善的3D UI或手势识别中。

但是，3D地图数据将比真人视频具有更高的带宽效率。每秒更新10次时，它仅需要272MB的数据。实时视频需要1.39GB的数据才能以每秒30帧的速度传输第一人称视频图像。将来，该团队还旨在将两种流类型合并在一起，以使最终用户受益，帮助优化数据以满足网络的最小带宽水平。

尽管存在这些初期问题，但全息增强现实系统仍具有巨大潜力。除了新颖的视觉界面外，它还为用户提供了许多便捷的控制远程无人机的方法，只需使用简单的便携一体式增强现实头显即可，而不必依靠传统的功能齐全的计算机、显示器和操纵杆。

研究人员计划在定于2020年10月25日至29日举行的国际智能机器人及系统大会（International Conference on Intelligent Robots and Systems）上提出将AR与自动无人机合并的“第一步”。

苹果新专利曝光：可直接实现抠像合成的MR头戴设备

近日，美国专利商标局发布了一项新的苹果专利申请，该专利申请是苹果于2017年从蒙特利尔一家名为Vrvana的初创公司那里获得，是一项关于混合现实显示器的专利。据领英信息显示，被列入该专利的六位发明人包括Vrvana的首席执行官和创始人，其在公司被收购后并未加入苹果。尽管现在这是属于苹果的专利，但列出的所有发明者均不是苹果公司的员工。

Vrvana的头显

专利背景首先定义了色度键控（或色度键合成），这是一种通过用第二张图像的内容替换一个图像中的颜色范围来合成两个图像的方法。例如，它通常应用于电影或新闻广播领域的中，通常用静态图像或视频替换绿色（或蓝色）屏幕背景。

尽管色度键控通常是后期制作的效果，或者是使用专用设备/软件现场完成的，但是它可以在增强现实（AR）头显（也称为混合现实）的环境中应用，其中用户可以通过头戴式显示设备实时看到真实环境中的虚拟元素。

一个示例是起重机模拟器，其中的控件将是真实的对象，并且彩色屏幕将由虚拟起重机和虚拟环境代替。

另一个示例是使用彩色屏幕的社交MR体验，该彩色屏幕覆盖了整个视野，并且只有用户的手或身体没有被虚拟内容替代（除非其颜色与屏幕相同）。该示例应用程序有时被归类为虚拟现实（VR），但为简单起见，我们在这里将其视为增强现实（AR）。

总体而言，本发明涵盖了包括照相机系统、图像处理单元（SoC和/或FPGA系统）和实现低等待时间色度键控的显示系统的头戴式显示设备（HMD）。

本专利提供了一种可穿戴式沉浸式头戴式显示设备（HMD），其使用嵌入式立体声RGB相机进行实时色彩键控以捕获环境，并提供一种显示系统来显示利用虚拟内容增强的真实世界图像。该系统以高帧速率（通常为75 fps或更高）运行，通过捕获图像并将其格式化以显示在HMD本身中，从而使延迟小于一帧。低延迟是实现沉浸感所需的关键要素。

嵌入在HMD中的颜色键控处理将检测选定的颜色范围，并混合来自HMD本身或来自外部源（例如连接的计算机）的虚拟内容。虚拟内容还可以在颜色键控区域的顶部合成，以允许混合现实内容遮挡现实生活中的对象。

苹果专利图2示出了混合现实HMD的光学器件，显示器和照相机的非限制性说明性实施例；图3示出了本系统的数据流的非限制性说明性实施例的示意性概述。

苹果专利图1示出了色度键控设置的非限制性说明性实施例的概述，该色度键控设置在此由人后的彩色屏幕组成。通过让用户通过头戴式显示设备（HMD）查看设置来实现混合现实效果。

苹果专利图4A示出了如由HMD的照相机色度键控设置的非限制性说明性实施例；图4B示出在用虚拟背景替换键屏幕之后，在HMD中显示的色度键设置的非限制性说明性实施例；图5A示出了如由HMD的照相机所看到的色度键控设置的非限制性说明性实施例；图5B示出了在用虚拟内容替换键色之后，在HMD中显示的色度键设置的非限制性说明性实施例。

美国专利局今天发布的这项20200252593专利申请是其于2020年2月提交的。但是，获得该专利的时间实际上可以追溯到2017年8月，或者是在收购交易被发现之前约四个月。考虑到这是一项专利申请，目前尚不知道这种产品上市的时间。

Mozilla宣布其Firefox Reality浏览器新版本现已支持PC VR平台

如果您正在使用Firefox Reality查看本文，您将能够做一些非常酷的事情，例如通过Mozilla Hubs与社交VR中的人聊天，探索Sketchfab上的近乎无尽的3D对象，并获取通过Hello WebXR浏览大量沉浸式内容的应用程式。只需单击链接，在您的VR头显上弹出（如果您尚未使用它）并进入即可。