瑞声科技多款光学产品亮相中国光博会，全链路光波导解决方案助力 XR 行业发展
解决方案
|
2023-10-07
高通推 XR 新平台，不与苹果比拼，Meta 新眼镜双首发搭载
第二代骁龙 XR2 加速 VR/MR 终端普及，第一代骁龙 AR1 专为智能眼镜打造
过去的几年间，高通曾推出过多款 XR 专用平台，包括第一代骁龙 AR2、第一代骁龙 XR2+、第一代骁龙 XR2 和第一代骁龙 XR1。
基于这些平台，高通已与包括 Meta、PICO、联想在内的合作伙伴，发布了超过 80 款终端设备。
而最近，高通面向 XR 领域，又带来了两款新平台：
- 第二代骁龙 XR2，为更出色的 VR、MR 设备而打造；
- 第一代骁龙 AR1，专为下一代智能眼镜而打造；
第二代骁龙 XR2 旨在推动 VR 和 MR 的普及，让终端用户享受逼真的沉浸式体验。
平台搭载能效和性能经优化的单芯片架构，无需外置电池组，即可助力 OEM 厂商打造高性能且价格合理的设备。
第二代骁龙 XR2 GPU 和前代相比，实现了 2.5 倍的性能提升，能够实现惊艳的图形效果和出色的色彩和细节。开发者还可以充分利用新平台的 GPU 能力，提升应用和游戏的视觉保真度。
此外，在同样的视觉效果下，相比于前代还能够节省 50% 的功耗。
显示方面，第二代骁龙 XR2 支持 3K×3K 显示，并针对 GPU 进行了大幅升级，以带来流畅视觉效果。平台支持众多最新的先进特性，如空间扭曲、游戏超级分辨率和视觉聚焦渲染。
第二代骁龙 XR2 支持并发感知技术，以实现用户和环境理解。
通常，要真正实现数字和物理空间的融合，需要对用户所在的环境有精准的理解，比如地板和墙壁的位置，房间里有哪些物品等。同时，也需要对用户有充分的理解，来进行头部追踪、眼球追踪、手势追踪、以及对全身的动作追踪等。
而这些技术在运行过程中需要消耗大量算力。
为此，第二代骁龙 XR2 在终端侧 AI 能力进行了大幅提升，以加强对高算力的需求。第二代骁龙 XR2 支持 INT8，并优化了不同 AI 模块之间的连接，以实现紧密的协同处理，同时扩展了终端侧的内存。
相比于前代，第二代骁龙 XR2 AI 算力提升高达 8 倍。
除了 AI 引擎能力的大幅提升之外，高通还对计算机视觉模块也进行了大幅升级。
对于 VR 和 MR 头显上始终开启的六自由度（6DoF）头部追踪会产生巨大的算力消耗，第二代骁龙 XR2 有别于前代通过软件实现 6DoF 特征探测和追踪（Feature detection and tracking），而采用芯片硬件视觉分析引擎来实现。
性能提升的同时，功耗和时延更低。
第二代骁龙 XR2 支持 WiFi 7 和 WiFi 6E 连接，以及支持高通 FastConnect 软件套件，能够实现 25% 的功耗降低，峰值速度达到 5.8Gbps，并且时延降低 80%。
为了在 MR 体验中增加现实世界的存在感，现实世界将通过外置摄像头实时流传输到头显屏幕上，并且需要视频透视时延保持极低的水平，从而实现出色用户体验。
高通通过对整个视频透视线程进行全面优化，第二代骁龙 XR2 可以实现低至 12ms 的视频透视时延。同时，还通过几何校正、降噪、动态亮度调整等技术，提升视频透视的图像质量。
9 月 28 日发布的 Meta Quest 3，为第二代骁龙 XR2 首发终端设备。
而第一代骁龙 AR1 平台，是高通为赋能下一代智能眼镜打造的首个专用平台。
在第一代骁龙 AR1 上，高通重点强调了关键特性，拍摄。
第一代骁龙 AR1 采用 14-bit 双 ISP，支持顶级即时拍摄体验，同时还结合了智能手机上的诸多顶级特性，比如自动曝光、自动人脸检测、计算 HDR 和人像模式。
同时，还进一步拓展了第一代骁龙 AR1 的 AI 能力。
AI 能力可以帮助增强照片和视频的拍摄质量，通过降噪实现更清晰的通话，并通过计算机视觉实现更清晰的视频拍摄。此外，面向健康和运动的健康传感器，让智能眼镜可以为用户带来 AR 体验，提供实用的情境信息和指令。使用语音指令来与智能眼镜交互可以解放双手，这一功能在滑板、骑自行车、做饭时非常实用。
第一代骁龙 AR1 还是一款可扩展平台，旨在通过支持多种不同配置，为 OEM 厂商提供灵活性，包括：
- 具备出色摄像头和音乐功能、以图像拍摄为核心的智能眼镜；
- 支持单目显示、完美支持提醒通知和导航应用的智能眼镜；
- 以及支持双目显示、具备更丰富视觉效果的更强大的智能眼镜。
智能眼镜中的虚拟助手可以回应用户的指令，并在用户眼前提供情境信息。此外第一代骁龙 AR1 还能够支持更多的用例，比如能够在街上或者购物中心通过视觉搜索为用户提供更为丰富的信息、进行实时翻译、货物拣选以及导航等。
第一代骁龙 AR1 也配备了最先进的连接解决方案，能够实现实时视频直播以及音乐串流，并且解放双手。
Ray-Ban Meta 系列也是第一代骁龙 AR1 平台的首发终端设备。
附：高通技术公司副总裁兼 XR 业务总经理 司宏国（Hugo Swart）与媒体采访问答
问：苹果在 Vision Pro 上，通过独立的 R1 来用于空间交互，高通是否有此打算与计划？
答：高通和苹果在这方面策略有所不同。Vision Pro 价格较为昂贵，且需要多个芯片与外置电池来支持。但对于广大消费者而言，这样的架构可能并非是他们需要和负担的。
以手势追踪为例，高通平台能够实现同样的手势识别和追踪功能，还能支持更多能力。高通采用了一种更加实用的思路，以将 VR 和 MR 体验带到更广阔的市场当中。
问：目前球盟会登录入口网页版已经看到业内不少单眼 4K 的终端设备，高通所提的 3K×3K 是否真的符合用户及市场需求？
答：4K 的显示效果肯定要更好，但高通认为这个问题的关键在于技术的成熟度。
目前，4K 显示仍然是非常昂贵的解决方案，也并不具备足以实现规模化扩展的供应能力。而 3K×3K 分辨率已经能够带来出色的视觉效果，相比市场上已有的解决方案有着很大的优势，我认为 3Kx3K 能够在用户负担的起的价位上打造满意的用户体验。
高通也非常看好 4K 显示未来的潜力，同时也密切关注整个产业的就绪程度。但就目前来说球盟会登录入口网页版关心的是，4K 显示何时才能真正实现大规模量产，让消费者能够买到经济实惠的设备。
问：虽然 AR 眼镜近两年颇受欢迎，但实际使用过程中，设备兼容性、连接性等都还存在一定问题，新一代 AR1 在这方面是否有解决和优化这些问题？
答：对于第一代骁龙 AR1，其支持的功能相对简单，因此所有的处理可以在眼镜端完成，不需要借助手机。
仅仅在用户需要把信息从眼镜上传到智能手机或云端时，才需要更加复杂的连接，但这不涉及到用手机操作智能眼镜，只需要进行简单的 Wi-Fi 连接，使智能眼镜和智能手机相连即可。
具有更高沉浸度和大显示屏幕的 AR 眼镜则大不相同，它们需要在手机侧完成处理工作，可能会面临此类挑战，当然高通也在持续投入来解决这一问题，但第一代骁龙 AR1 所支持的设备并不存在这类问题。
编辑：达达 / 球盟会登录入口网页版
