bilibili|5G+AI+XR：将成为开启空间互联网的钥匙( 二 ) 小米科技|机器人|腾讯

终端侧AI能力的重要性除了端云协同能力外，终端侧的AI性能也是一个重要参考指标。前文提到，无界XR可将大运算量的数据交给边缘云处理，然后再传回XR头显。而更实际的情况则是，为了保证XR设备端MTP时延需求，为了保证XR设备的隐私，部分数据必须要在设备端来完成。
以Quest 2为例，它的6DoF视觉定位追踪、手柄追踪、手势追踪等需要通过摄像头拍摄的图像信息来完成，以实现更好的交互效果。这些数据必须要在设备端来完成的原因有：1 ，用于设备的定位追踪和交互用途，需保证低时延，上传云端处理过程会增加时延降低体验；2 ，数据带有极高隐私性，用户使用场景大多数是在家中，对数据隐私性要求更高。
因此，这就需要XR设备端拥有良好的AI能力，包括：视觉追踪，图像数据分析等任务。比如，在VR应用中的虚拟化身需要实时交互，眼球追踪，面部动作追踪的加入将有助于推动更好的虚拟化身交互，创造出更逼真的虚拟社交体验。

Meta Cambria曝光图，来源：Sadlyitsbradley
这一趋势也体现在今后AR、VR设备升级迭代上，目前已知的几款即将发布的VR/MR新品都加入了眼球追踪传感器。作为对比， Quest 2有4颗图像传感器，而传闻Meta下个月将发布的Cambria头显将配备10颗图像传感器，除了眼球追踪还有面部追踪等特定用途。可见XR设备产生的图像数据将越来越丰富，强大的终端AI能力将是保证优秀XR体验的前提。
骁龙XR2的AI性能是骁龙XR1平台的11倍，可以很好的支持高精度定位和眼球、手势追踪功能。搭载骁龙XR2的Quest 2等产品已拥有出色的表现， SLAM定位和手势追踪效果非常优秀。有消息表示， Cambria将搭载升级版骁龙XR2芯片，无论是基础性能还是AI性能上都将有所提升。
而在隐私保护方面，基于设备端的AI能够保证敏感数据在本地完成，提升安全性、保护个人隐私。另外， XR设备端的AI也可侦测识别恶意软件和可疑行为。
综上所述，基于5G+AI+XR的无界XR不仅大幅提升AR、VR的产品体验，还将边缘云、终端侧能力发挥到最大，为更沉浸的空间互联网提供了综合型解决方案。
全方位助力XR产业发展不仅如此，高通在XR平台、参考设计、软件和算法、以及开发者平台上已经形成完备的技术矩阵，很多核心技术研究已达十余年，这些技术将全方位推动XR产业发展。

1 ，骁龙XR平台
高通已推出AR、VR专用芯片：骁龙XR1、骁龙XR2 ，采用骁龙XR平台的XR设备超过50款，包括国内的PICO、奇遇VR等热门VR一体机。除了强大的AI能力外，骁龙XR平台融合了众多领先技术特性，可提供丰富的图形能力、空间音频和影像处理能力，对打造沉浸式空间互联网提供必要的帮助。
与此同时，高通还将针对XR平台进行更进一步的定制与合作，今年3月高通就针对AR芯片开发宣布与微软展开合作；在本月的IFA 2022大会上还与Meta就XR芯片定制进行深度合作，为XR企业提供更多样化的选择。
2 ， AR、VR参考设计
基于骁龙XR平台，高通已打造出多款VR、AR参考设计，包括：骁龙XR1 AR眼镜参考设计、骁龙XR2无线AR眼镜参考设计等，目的就是帮助XR设备厂商快速打造产品，推向市场，其中联想ThinkReality A3就是基于骁龙XR1 AR眼镜参考设计而推出的产品。
不得不提的是骁龙XR2无线AR眼镜参考设计，它为轻量化AR眼镜提供了新的设计思路，通过基于智能手机等终端的分离式渲染，通过无线化的方式取消原有的线缆束缚，简化连接步骤，大幅提升了用户体验。