5G赋能XR,2021 AR/VR行业迎来发展新势能

5月10日,Pico推出Pico Neo 3;5月12日,HTC推出Vive Focus 3。连续两波重磅移动XR头显的发布,瞬间吸引了所有关注者的目光。同时,大家也都注意到了一个事实:这两款重磅XR头显新品,以及去年9月份发布并持续火爆的Oculus Quest 2,都采用了高通骁龙XR2平台。结合2月份高通宣布推出基于骁龙XR1平台的首款AR智能眼镜参考设计,不知不觉间,高通骁龙XR系列平台已经统治了移动XR领域。

XR:5G赋能的下一代计算平台

每一次无线通信技术的迭代,都会对人们的沟通方式带来显著的影响。1G时代,模拟语音是最主要的交互方式;2G时代,数字语音和短信功能提高了交流品质和可靠性;3G时代,基于移动互联网的图文内容越来越普及;4G时代,大屏幕视频交互成为主流。而5G时代,融合5G、AI和空间计算的全新通信方式,即全息远程呈现是否将会全面实现呢?

高通技术公司副总裁兼XR业务总经理司宏国在HTC VIVE虚拟生态大会上提出对未来世界的畅想:人们不用再低头通过手机、电脑的二维屏幕获取信息;只要戴上眼镜,虚拟信息就能够叠加在透过眼镜看到的真实世界之上。这种现实世界与虚拟信息融合的愿景,将推动我们以全新的方式获取信息、沟通交流、进行导航和协同工作。这就是XR的意义。

当然,从目前的2D屏幕完全过渡到空间计算,还需要数年时间。但与前几代技术相比,空间计算将对人们的生活产生更加深刻的影响,可以说,人们的世界将变成一台拥有巨型屏幕的电脑。而在XR发展成为下一代移动计算平台的过程中,AI和5G将发挥关键作用。AI让骁龙XR2平台的多个特性大幅提升,而5G连接则可以帮助XR2平台创新使用体验,特别是对低时延、超高数据传输速度的要求。

5G能够提供超高速率的连接,这种高速率不仅体现在数据吞吐量上,还体现在超低时延方面。而在时延足够低的情况下,XR设备就可以将部分原来在本地进行的计算放到云端或者边缘云来处理,也就是跨设备和边缘云的分离式渲染处理,这也是高通所倡导的无界XR(Boundless XR)。未来XR设备的分辨率将会在从2K迈向4K甚至8K,对于性能的要求会越来越高,这样的高能耗计算平台很难被整合到本地或者XR头显当中,而无解XR将会是最合理的解决方案。

移动XR行业的赋能者

首先明确一点,我们这里所谈论的XR(扩展现实),实际上是VR(虚拟现实)、AR(增强现实)和MR(混合现实)的统称。在谷歌Cardboard和任天堂《Pokemon GO》的影响下,VR和AR的概念早已在消费者当中得到普及。而近十年XR浪潮的体验巅峰,则来自于基于PC平台的Oculus、HTC VIVE和Steam VR。不过最近几年时间里,我们可以明显感觉到移动平台已经全面发力,成为了XR行业的主流。特别是在以5G为代表的下一代网络时代来临后,移动XR正在完成新一轮进化。

当XR切换到移动赛道后,深耕XR领域超过5年时间的高通开始全面发力。或者从某种意义上讲,高通就是移动XR行业的核心推动者。高通针对XR领域的早期研究始于2009年,过去10年进行了长期且大量的技术研发投入。早期参与到移动VR市场的硬件厂商,有很多都直接采用了高通骁龙8系列芯片。

凭借多年的积累,高通在XR行业不再局限于供货商的角色,而逐渐成为整个XR行业的核心赋能者。从核心XR平台打造、算法与架构开发、设备参考设计提供到协助市场推广,高通从多个方向推动着移动XR产业的发展和变革。这与高通在智能手机行业所扮演的角色类似:提供核心平台和技术,广泛团结各类型合作伙伴,构建从芯片、硬件到系统、软件的完整产业生态。

在XR硬件领域,高通与Oculus、HTC、爱奇艺、Pico、大朋VR、3Glasses、歌尔、影创科技等众多企业都建立了合作关系。目前,市场上已经有超过40款基于高通骁龙XR平台的设备发布,高通骁龙XR平台已经成为事实上的行业标准。

在内容生态方面,高通也联合众多企业深度参与。在去年举行的第二届Qualcomm XR创新应用挑战赛中,共收到超过240个参赛作品,其中超过210个优秀参赛作品入围,超过30个作品入选Qualcomm XR企业计划(XEP),最终有18个作品获奖。今年,高通也将继续举办2021 Qualcomm XR创新应用挑战赛,通过这类活动激励更多开发者参与到XR内容生态建设中来,推动XR生态系统软件、硬件协同发展,进一步释放行业创新潜力,加速XR技术的普及。

高通的XR完整拼图

针对用户对体验的需求不同,移动XR设备主要沿着两个主线演进:一类是XR一体机,未来1~4年内,VR和AR一体机将会更加轻量化,并且通过支持5G网络来实现应用创新;另一类是XR眼镜,因为采用了分离式计算核心,这类产品更容易实现轻量化,并且将逐步完成从线缆连接到无线连接的过度。

针对两种产品形态的需求,高通在平台方面也采用了两种优化方式。如果不考虑与智能手机等设备共平台的骁龙8系列芯片,只谈面向移动XR产品的专属平台,主要有2018年5月发布的骁龙XR1平台,侧重于轻量化产品,也就是XR Viewer品类;以及2019年12月发布的首个5G XR平台骁龙XR2平台,主要用于高性能移动XR一体机。

骁龙XR1平台在打造轻量化XR头显方面拥有显著的优势:高通在高性能移动计算平台以及无线连接方面拥有巨大的技术和生态优势,可以实现轻量化XR头显(包括VR头显和AR眼镜)与智能手机、PC的良好协同。也就是说,简单的应用处理可以交给头显中的XR1平台,而复杂计算部分则可以通过有线或无线的方式连接智能手机或PC来完成;如果用户使用的手机同样采用骁龙平台,那么还能实现协同计算。

针对轻量化AR眼镜的需求,高通在今年2月份还推出了专门的骁龙XR1 AR智能眼镜参考设计。和普通简易AR眼镜相比,该参考设计系统整体功耗降低了30%,并且能够同时支持手势追踪、头部追踪、平面检测、防抖、六自由度以及丰富图形等多种先进特性。基于该参考设计的AR智能眼镜能够与不同品类的主机设备相连,包括5G智能手机、PC,搭配基于骁龙平台的移动终端和笔记本电脑使用时,能够实现更好的性能表现。

XR一体机更强调独立性,大多时候需要独立完成XR体验的高性能计算,因此需要足够好的平台性能支撑。高通骁龙XR2平台与骁龙835移动平台相比,实现了2倍的CPU和GPU性能提升,6倍的分辨率提升,以及高达11倍的AI性能提升。它可以支持单眼90fps 3K分辨率以及七路并行摄像头计算,且具备计算机视觉专用处理器的XR平台。

下一个“星辰大海”

XR行业已经火爆了10年,但是几乎所有的早期参与者都没能从中得到足够的收益,XR行业“爆发”似乎只存在于未来时间表中。不过,随着AI、5G技术的进步,以及从镜片到芯片整个供应链体系的成熟以及平台内容的日渐丰富,XR行业似乎已经开始“蠢蠢欲动”。

司宏国在接受媒体采访时曾表示:没有人能够真正知道XR拥有哪些潜力,就像二十年前智能手机刚刚开始使用时大家难以预测智能手机上可以有成千上万甚至百万量级不同类型的应用程序。人们现在几乎可以在智能手机上完成任何事情,无论是拼车、支付,还是导航、拍摄。这些功能都是二十年前完全无法想象的,但是现在一切都成为现实了。

如今,XR设备的应用领域也正在被逐渐发掘,它为教育、工程、零售以及娱乐等领域带来了巨大的改变。除了普通消费者最熟悉的影音、游戏应用,XR设备在企业级应用中也逐渐体现出了商业价值。比如在医疗领域,XR设备可以在中风病人康复、远程手术教学、幻肢症治疗等方面发挥很大作用。在教育培训领域,特别是远程教学、特殊场景培训、特殊设备操作等场景,XR设备相较传统模式体现出了明显优势。在工业领域,XR设备早已在安全巡检、故障维修、远程协助等场景得到了广泛应用。

根据IDC及CCS等知名市场研究机构的数据及预测:XR头显的市场潜力巨大,2020年全球出货量达到了700万台,2021年出货量有望达到1200万台,并在未来一段时间里保持70%以上的增长率。预计到2024年,XR头显的出货量将超过5700万台,硬件销售额将达到310亿美元。庞大的市场、巨大的机遇,正等待硬件厂商和内容开发者去挖掘!