日前,高通针对VR/AR推出了其第一款专用芯片——XR1,虽然其之前的几款方案几乎都支持VR/AR,但XR1的意义远不止如此。
借此契机,陀螺君采访到高通(Qualcomm)XR业务中国区负责人,了解到高通推出XR1的真正目的。
在智能手机芯片中稳居老大位置的高通,在XR中依旧聚焦于移动平台。当我们以为高通只是借这款芯片在XR上试水时,其已经做好了在XR上长期作战的准备,并表示该芯片还将陆续迭代。
“我们坚信移动XR是下一代计算平台”,郭鹏坚定地说道。
5月29日,在圣克拉拉举办的AWE上,高通正式发布其第一款专门针对VR/AR的芯片——XR1。高通甚至为其专门开辟XR产品线,可见其对XR的重视程度。
其实从2、3年前开始,XR1这款芯片就已经开始规划,之所以选择在2018年推出,郭鹏说明了原因。
“目前的VR产业发展比较成熟,虽然没有爆发,但VR产业链包括硬件、软件、零部件都逐步趋于成熟、定形。而对AR来说,虽然还没有完全成熟,但已经有不同形态的AR产品开始被开发者广泛采用。所以在这个时间点推出一款专门的XR芯片,对VR注入新鲜血液,把AR产业往前推进来说,都是非常合适的。”
在XR出现之前,我们熟知的只有VR、AR和MR,其都有相对应的设备,且概念更容易理解。而高通主打的XR究竟是什么概念?
郭鹏对XR的定义解释道,“XR”这个术语,是被用来描述增强现实(AR)、虚拟现实(VR)、混合现实(MR)以及所有相关的用例。而高通更多是从这些“R”的底层去看,这些AR、VR或者MR的底层软硬件技术其实很多都是相通的,尤其是芯片这侧一些基本的技术、SDK等。“所以我们用’XR’这个概念来包括虚拟现实、增强现实和混合现实的整个业务内容。这是我们最根本的出发点,我们认为在未来一定会有一个融合的趋势。”
“我们坚信移动XR是下一代计算平台。”郭鹏坚定地说道。
关于*R将成为下一代计算平台的说法,在VR这一波爆发之初几乎不绝于耳,而随着一轮洗牌之后,渐渐地越来越少人对外主张,甚至很多人对这个观点开始持怀疑的态度。不过高通却一直在用行动贯彻始终。
从PC互联网到移动互联网的发展过程中,人们的使用习惯也发生了巨大的变化,智能手机成为生活中的必需品。从通讯芯片发家的高通也在移动浪潮中,在智能手机领域占据了绝对优势,根据Strategy Analytics 发布的2017年全球智能手机应用处理器市场收益份额数据来看,高通市占比达到42%,远超苹果和联发科等其他平台。虽然也尝试向PC领域进军,但并不顺利。
“我们一直把XR定义为下一代的移动计算平台,它未来是可以替代部分、甚至是大部分手机功能的平台。现在很多时候我们用手机操作,比如观看视频、阅读或是浏览信息,都是需要双手拿着手机的。而对VR/AR眼镜来讲,它将能够解放你的双手,让你有更多的空间和更多的方式去进行交互。”
所以在高通眼中,XR在未来的潜力是可以与现在的智能手机匹敌的。而既然认定了这个方向,为了推动XR的发展,高通似乎也是不遗余力地布局。
除了上述XR1芯片之外,高通在XR领域的布局远超我们想象。
1、芯片:低中高三端齐下
其实在XR1芯片推出之前,高通的821、835、包括最新的845都已经在VR/AR设备中有应用,特别是835和845方案,都专门针对VR/AR做了优化。
相比其他几款,XR1则是为XR定制。从郭鹏口中,我们了解到高通对这款芯片的定位,在其看来,XR1是820、821方案最适合的过渡产品,性能较这两款芯片有提升,但相比835、845这种主高级方案又略微逊色。
“目前针对VR和AR产品的演进,与手机相比是有一些差异的。比如刷新率的支持就十分明显,因为手机都是支持比较主流的60Hz,在VR、AR设备上则需要支持75Hz甚至90Hz。另外一方面是屏幕的分辨率,手机上一般是很难用到4K甚至2K,但是在VR设备上,要追求大的FOV(视场)达到沉浸式体验,2K、4K分辨率其实都是不过分的。除此之外还有一些专门针对XR的新技术,比如说3DoF或者6DoF的手势方案、眼球追踪、局部渲染的支持,这是以前在手机上都是没有的,但对于XR而言是新技术。不管是对于骁龙820、821、835和845上针对支持XR的软件,还是骁龙XR1这个专用芯片的软件和硬件,我们针对VR和AR都有特别的优化、来支持XR的特性功能。”
高通845平台
据称,XR1的亮点主要集中在4个方面:
1、AI Engine,能够处理AI用例,运行是计算机视觉算法,以实现应用于AR场景的姿势预测、物体识别等。
2、支持4K 60帧视频播放,并且可以利用ISP软硬件算法降噪,支持OpenGL、OpenCL和Vulkan等API。同时,基于高级视觉处理技术,如视觉惯性测距(VIO)等,让用户能在虚拟世界里自由移动,或在AR体验中与虚拟物体进行互动。
3、全景声效果。XR1的头相关变换函数(head-related transfer functions, HRTF)可根据用户的头耳传递参数“定制”合成双耳声,让用户感觉仿佛声音是来自空间中某个特定的位置。
4、支持3DOF和6DOF交互,显示时延低于20ms。
据称目前Meta、Vive、Vuzix和Pico等厂商已基于首款专用的XR1平台进行开发,今年Q4季度将会有搭载了这款方案的产品面世。
另外,对于835和845平台,835已经在Vive Focus、Pico Neo、爱奇艺奇遇二代等主流的头显中应用。而845,高通将其定义为移动端的体验方案。今年年初,高通针对这一平台推出了VR头显参考设计,在头显中集成了眼球追踪、手势识别、SLAM定位、6DoF追踪等功能。高通曾表示,骁龙845移动平台“旨在帮助消费者拍摄影院级视频,以及模糊物理世界和虚拟世界之间的界限”。
高通VR一体机参考方案
从芯片方案上,高通的平台覆盖了低中高体验方案。在芯片的研发投入上,根据IC Insights发布的2017年半导体研发领域投入TOP10的公司来看,高通仅次于英特尔,去年在芯片研发上投入了34.5亿美元。
(数据来源:IC Insights)
2、投资:XR已布局多年
在XR领域的投资方面,高通也投入了相当高的额度。
2000年11月,高通成立Qualcomm风险投资,启动5亿美元基金用于投资发展早期的高科技企业,小米、中科创达等都获得了高通的支持。
从2015年开始,高通的主营业务逐渐从智能手机延伸到前沿科技,包括无人机、机器人、AR/VR、AI、物联网等领域,这也成为了高通创投主要关注的方向。
从陀螺君整理的高通在VR/AR上的投资布局来看,其投资的大部分企业都成功融到了A轮之后,甚至到C、D轮的阶段,融资额多数达到数千万美元。而在对企业的倾向性上,其似乎更偏向于硬件和技术相关的企业,特别是AR眼镜厂商Magic Leap和眼球追踪技术研发商七鑫易维、以及海外的VR相机研发商Marrport这三家更是获得了高通多轮追投。而高通推的845方案的VR一体机中,也结合了七鑫易维的眼动模组。
由于高通自身处于产业链上游,能够最快速地了解到前沿科技,其对于技术的发展以及应用前景能有更深的把握,其投资的这些技术、企业也恰巧验证了高通一直在强调的,坚信XR是下一代计算平台的这一观点。
虽然坚定了这条路,但郭鹏并不觉得XR能在短期内像智能手机一样融入大众生活中。其认为未来至少需要5-10年,XR可能才会成为人类平时生活不可缺少的设备。
而目前来看,郭鹏认为制约移动XR发展的几个因素主要在于:
1、硬件优化。从底层芯片来看,当算法跑在硬件上,如何实现很好的性能与功耗,是制约产品使用体验的重要因素。
2、外围零部件的发展。比如屏幕、光学,这些对于产品的形态、体积、成本非常关键。
3、内容。比如VR视频、游戏内容,AR方面更多、更丰富的人机交互应用,都必须要依靠整个产业链和开发者共同推进。
“现在的XR可能相当于二三十年前的手机行业,它还在一个非常初级的阶段。因为我们可以很明显地看到,光是在XR里一个很小的领域,比如说XR里的AR显示或是光学领域,就会有非常多的公司存在,还处于一个技术“群雄乱起”的年代。经过时间的推移,随着产品化、量产性、技术成本、成熟度的发展,一定会逐渐出现一些最终站上舞台的技术公司,来把技术不断地往前推进,推到一个比较明确的发展道路上去。这就类似于二三十年前的手机,功能机时代有很多不同的技术,但后来我们会发现,有一些技术到将来可能没有太大的用处,逐渐就会被淘汰。但一定有主流技术会带领这个市场往前走,走到今天这个时间节点,XR未来也会是走上这样一个路径。”
而在XR的发展过程中,5G将是其重要的助推力。
5G拥有高带宽、低时延、海量大连接的特性,其未来要求单个5G基站至少能够支持20Gbps的下行速率以及10Gbps的上行速率,主要应对4K/8K超高清视频、VR/AR等大流量应用。
各大运营商都在推进5G的基础设施建设,循序渐进地落地,而高通、英特尔、华为等各大手机厂商的5G芯片也相继面世,5G商用预计将从2019年正式开始。
但是,智能手机并不是5G最适合的应用场景,因为现在4G网络已经完全能够满足手机上的看视频、刷网页、语音通话等各种需求。所以从今年WMC展会上的情况来看,各大运营商,包括参与推进5G落地的厂商,都会在展台展示VR/AR的相关应用,包括VR直播、VR观影、VR游戏、VR电竞等等。
在VR硬件方面,今年其实也看到非常多的硬件厂商将设备定位于观影场景,包括爱奇艺的奇遇二代、Oculus GO、小米VR一体机以及亿境的EM-VR01等,而市场上也有非常多用于观影的专业设备,比如嗨镜、柔宇Moon,这些设备均为一体机,主打高3K甚至4K分辨率屏幕,能能够播放4K或者8K视频。
在6月份中国移动发布的《5G终端产品指引》中,提到的未来三类5G行业终端拓展智能终端中,通用类产品(VR/AR、无人机)赫然在列。并且计划在2019年4月和7月分别采购智能手机、VR/AR等设备。
“如果说3G时代是高清通话,4G是高清视频传输,那我们认为对5G来说,VR、高清全景视频,4K、8K视频传输,都一定会是很重要的用例。同时对于游戏这方面,5G也会有一些新的爆发点和结合点。”
陀螺君认为,5G或许难以让VR/AR一时间内得到大范围爆发,但5G将成为后续XR的发展基石,芯片、屏幕、交互、系统各方面共同进步,解决了硬件最根本的问题才有可能真正成为普适性的消费电子产品。
而高通,则正是给XR打基石的重要一员。
关注微信公众号:VR陀螺(vrtuoluo),定时推送,VR/AR行业干货分享、爆料揭秘、互动精彩多。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息