高通郭鹏:XR将成为驱动下一次变革的重要平台

12月11日,2020未来商业生态链接大会暨第五届金陀螺奖颁奖典礼(简称“FBEC2020”)在深圳大中华喜来登酒店6楼宴会厅开幕。本届大会由中国通信工业协会虚拟现实专业委员会、广东省游戏产业协会、深圳市科学技术协会、深圳市信息服务业区块链协会、深圳市互联网文化市场协会指导,陀螺科技主办,深圳市科技开发交流中心、恒悦创客魔方协办,行业头部媒体游戏陀螺、VR陀螺、陀螺电竞、陀螺财经、陀螺传媒联合主办。FBEC2020以“远见者稳进”为主题,将一如既往地关注未来趋势发展、行业创新升级、商业生态新链接等前沿领域。

在2020全球5G XR产业发展峰会,高通中国区XR业务负责人郭鹏以“骁龙助力实现XR的未来”为主题发表了演讲。郭鹏表示,手机技术发展的目前已经能够逐渐替代大部分计算平台,而在未来,相信XR将成为驱动下一次变革的重要平台。

他进一步分析认为,XR发展会逐渐替代实体屏幕,也会用类似“注视”的功能替代触摸、点按的交互方式。

此外,郭鹏还对未来XR的发展形态提出了三个关键词,即无线、融合和协同。他说到:“在现在所处的5G、AI以及XR深入融合的时代,我们会面向产业链不同角色进行合作、推广以及优化。同时,我们也会面向消费者和行业,一起做一些优化项目。我们希望通过这些工作来联合整个产业链的朋友们,一起打造更加沉浸、更加智能、更加互联的未来。”

以下为演讲实录:

谢谢大家,很高兴有机会和大家线下见面,在今年疫情背景下,年底又能在一起交流想法。

我来自高通,今年我想和大家聊聊XR的终端未来的10年会以怎样的趋势发展,会产生什么新的形态。

首先是VR/AR分别是虚拟现实和增强现实,对于我们来讲,XR包括了VR、AR以及MR,即你用VR设备可以看到整个物理世界的功能。

随着XR的发展,数字化转型已经开始。我们可以看到,我们在一个城市当中可以将自己的定位以及整个的物理世界和数字世界无缝衔接起来,戴着眼镜就可以获取我们需要的信息。比如交通的状况、购物中心的指示和导航,还有一些与人、与物以及与周边环境的状况。

早在1000多年前,我们人类就已经开始用一些媒介来传递或者存储一些信息。这种形态已经存在了千百余年,今天我们引入了XR这个概念,物理的屏幕可能会消失,而整个世界会成为你的屏幕。

为什么这样讲?首先二维的屏幕视角非常有限,到了XR,你的周边都是屏幕,360度的。从维度来讲,当你进入整个空间的计算层次之后,你会发现整个空间会成为你的屏幕,这个是一个升维的概念,所以不仅是360度全景,而且是升维的概念,这是一个重要的原因。

不仅屏幕会经历从二维到三维的改变,交互方式也有可能会发生很大的变化。

以前我们是通过触摸和点击,用手指和手势完成世界和人的交互,未来你可能通过一个注视点的聚焦就可以代替传统的触摸或者是点击的方式,从而改变人与世界交互的方式。这个里面我们有人和物品的交互,我拿起一个药品就可以拿到更多的信息,什么时候服药,剂量是多少;我拿起银行卡就可以看到账单以及未来财务管理的计划;我到了一个地点就可以看到更多的商场和商家的促销信息;我到了一个博物馆,在传统的一些艺术品的基础上,可以叠加一些虚拟的信息方便理解;我们和人交流的时候,有可能是通过人脸识别或者一些其他的功能来获取更多信息。这些就是你通过一个简单的注视就可以实现与这个社会和这个世界的交互。

我们的硬件设备分为三种类型,一个是计算系统,一个是娱乐系统,一个是通信系统,这三个系统以前是互相不干扰的。随着智能手机的普及以及4G、5G的到来,这三种系统的大部分功能都已经被智能手机代替了,我们的手机拥有强大的算力可以进行智能计算,手机可以代替你平时看电视等等,不仅保留了最基本的通信功能,而且还从以前的电话、短信发展到现在的视频电话等其他通信方式。所以智能手机发展到今天其实已经代替了原来很多其他设备支持的功能,但是我们相信XR将成为驱动下一次变革重要的平台。它将有望替代手机全部的功能,但时间上无法估计,因为需要零部件和产业以及软件生态的配合。

未来的设备会怎么发展,我们总结了一些想法。

今天我们可以看到VR和AR的一体机。画面的上半部分是一体机,比较重和大,出于成本的考虑以及对沉浸式的考虑,可能你的设备还是做得比较大。在未来的一到四年,我们会发现一体机会逐渐变得更小。使用一些先进的技术,将产品做小,同时提供沉浸式体验。未来也许产品会越做越小,我们看下面和手机相连的方式,今天我们可以看到手机相连的不管是VR头显还是其他,大部分还是有线的连接,通过USB连接手机,通过手机做一些算力和计算的功能。

未来1-4年,我们认为这个形态的产品很有可能会往无线发展,利用到手机上已经有的Wi-Fi 6的高速率、低时延功能,可以实现手机和VR/AR设备的无线连接,同时保证和有线一样的低错误率。

再往后走,随着技术的进一步发展,包括光学技术,CPU、GPU的技术,周围零部件的技术,以及其他的一些软硬件技术在内的协同发展,我们发现或者预测我们未来不管是一体机还是分体机,最终会融合成一个很轻薄的眼镜。

融合有两层意思,一个是我们认为一体机和手机相连的眼镜最终可以直接连接Wi-Fi或者5G的一体机;另外一种融合是VR/AR的融合,这可能会涉及一些光学和显示的技术。

VR/AR的融合是很多年来大家都在讨论的话题,目前VR/AR的光学是无法融合的。VR是透镜式的,AR是反射式的。现在VR/AR的融合有两个趋势,短期内可以通过VR的透视达到AR的功能,这个也是我们看到的一些功能。VR头显通过两个摄像头就可以看到周边的世界,虽然是经过你的摄像头拍摄之后显示到VR屏幕上的一种方式,但是这个方式可以处理端到端的时延以及色彩的变化,用VR的方式去看、去做AR产品,是一种事半功倍的方式,因为它的的成本相对会比较低。而且其他的一些交互方式以及设计理念其实和目前的VR是一样的。这个是第一层的融合。

第二层我们往远讲,我们可以看到一些光学可以同时支持一些硬件切换。一些客户已经开始研究硬件切换,目前量产还需要一段时间,我们静候佳音。

这个是我们认为未来协同合作的一个例子,场景里既有真实的人,也有全息显示的人,你的渲染技术和XR的算力设备以及你的应用设备可以做到极致,其实就是一种无差别的视觉。里面最基础的空间计算,包括获取设备在空间的位置,这个是XR这个应用能够得以有沉浸式和真实感的最基础的技术。想要实现所有功能,一定是要有很准确的空间计算。

当然还有眼球追踪、5G网络以及手势跟踪,这些都是需要整体优化的东西。图片所展示的是我们认为的全新会议系统,我们有客户在这个方向上做努力,包含能从远端投射人的摄像头,把人全息三维的图像收集好之后进行传递,本地的人通过引进就可以看到远端的人处在正确的位置和你沟通,这个是未来的应用场景。

到今天,高通骁龙的XR平台已经推出了四、五代,目前我们有XR专用的骁龙平台。到今天,我们已推出超过30款XR设备,有VR的,有AR的,有一体机,有分体机,有国内的还有国外的,而且有更多的设备正在研发中。我们会持续推进,包括骁龙XR平台在内。

我们看XR2这个平台,它去年就已经发布,不算新平台了。今年我们可以看到国内的影创已经发布或者量产了搭载XR2的产品,XR2是一个生命力比较长的平台,我们会持续的在这个平台上发力,进行优化、迭代、升级或是下放来将它扩展至不同形态的XR设备市场。这个产品目前来说还处在壮年期,越来越多的客户会使用该平台,推出更具差异化的产品。

除了芯片,我们还与内容生态、硬件、零部件,以及运营商等XR生态系统合作伙伴展开合作。

比如我们的XR企业计划,会把国内外优秀的面向行业应用的人吸纳进来,让他们更多的在设备商侧发挥作用。零组件和供应商一侧,我们会提前验证,并且会提前集成一些关键技术。有些技术可能是第三方的技术,而不是高通自己研发的,比如眼球追踪和手势识别,可能我们会自己研发,但是我们会去提前适配好,让用户有更多的选择。运营商也是非常重要的一块,我们会根据市场的细分,和运营商推广不同的产品和业务。

最后说说无界XR,它的基本原理是对头显做一些基础处理,但是在渲染上更多的是依赖5G云端的渲染或者本地的PC。本地计算能力配合云端的超大的计算能力,或者是GPU的渲染能力,我们就可以具备打造无界XR的能力,在视觉和听觉上提供全新的沉浸感。

在现在所处的5G、AI和XR深入融合的时代,我们会与产业链上扮演不同角色的伙伴进行合作、推广以及优化。同时,我们也会面向消费者和行业,一起进行优化项目。我们希望通过这些合作来联合整个产业链的朋友们,一起打造更加沉浸、更加智能、更加互联的未来,谢谢大家!