高通发布全新骁龙 XR2 5G 参考设计,支持高达 7 个摄像头
![20](https://cdn.shenzhenware.com/uploads%2Farticles%2F14066%2F%E6%B5%B7%E6%80%9D_XR_%E8%8A%AF%E7%89%87.jpeg?imageView2/0/q/100|watermark/1/image/aHR0cHM6Ly9jZG4uc2hlbnpoZW53YXJlLmNvbS91cGxvYWRzL3B1YmxpYy93YXRlcm1hcmsvJUU2JTk5JUJBJUU5JTgwJTg5JTIwbG9nbyUyMCVFNyU5OSVCRCVFOCU4OSVCMl8lRTclOTQlQkIlRTYlOUQlQkYlMjAxLnBuZw==/dissolve/100/gravity/NorthEast/dx/35/dy/20)
海思发布新一代 XR 芯片平台,支持 8K 解码能力,高达 9TOPS 的 NPU 算力
AR/VR 的市场已经迎来了爆发式的增长,海思的解决方案来了
5 月 21 日,上海海思携手 Rokid 等终端厂家,正式发布 XR 芯片平台。该平台基于一款可以支持 8K 解码能力和高性能 GPU、NPU 为一体的 XR 芯片。
为了更好的适应 AR/VR 场景高分辨率、广视角、低延时的特点,上海海思联手国内领先的 AR 企业 Rokid 共同优化了平台专用的算法和方案,双方对语音、视觉、环境感知等 AI 计算能力做了大量的优化工作,完成了多路视频编解码的高分辨率低延时设计,从芯片规格、系统软件和云端服务多个层面,为 XR 行业提供 AI、交互和多人协同等核心基础能力。
现状:
众所周知,作为产业规模超百亿美金,市场空间年增长率超过 70% 的新兴产业,AR/VR 的市场已经迎来了爆发式的增长。AR/VR 技术会在教育、医疗、娱乐、地产等各个行业得到全方位的应用,但是目前市场上的 AR/VR 终端产品仍然在体验上存在着各种问题:
1、设备分辨率低的问题
以 VR 为例,人眼能达到的理想分辨率大约为 60PPD(每度像素数),一般支持 4KP60 解码能力的芯片能支持的单眼分辨率为 21.3PPD,对应到电视的话只能等效于 480P 的电视显示效果,还远远达不到让人感到舒适和沉浸式的效果。
而海思 XR 芯片平台所提供的 8K 的硬解码能力,可以支持到单眼 42.7PDD,从解码能力上看已经有了大幅的提升,可以支持消费者体验到更清晰的内容。
2、眩晕问题
眩晕问题一方面和人眼的视觉疲劳有关,而显示画质差、纱窗、拖尾、闪烁等过低的画面质量都会引起人眼视觉疲劳,从而造成眩晕,主要还是由于人体视觉感受器,平衡感受器和本体感觉各方面不一致或者冲突时造成的眩晕。
往简单了说就是:眼睛看到动了,但是身体没有感觉到动,或者身体动了,但是眼睛没有看到动。对应到 XR 的场景就是由延迟造成的动作和画面不一致。而延迟的来源一般有两个因素,一是 CPU 处理性能不足,不能及时处理;其次是网络造成的延迟。
海思 XR 芯片平台支持 8 核高性能处理器,强大的 CPU 处理能力能够大幅提高终端设备计算的速度,从而避免延时的产生;同时该平台针对网络性能也有针对性的做了协议上的优化,可以有效降低网口处理数据导致的延迟,从而降低眩晕症的发生。
3、数据分析耗时长、速度慢
AR 产品的一个重要应用场景是人脸识别、车牌识别,这需要对 AR 眼镜摄像头中采集到的视频图像进行实时分析,正确识别出每帧图像中的人脸及车牌,将识别到的结果上传到服务器进行比对,并将比对结果实时显示到眼镜中的屏幕上。
从图像采集、分析、上传到显示,耗时越短,速度越快,用户体验越好,而分析阶段是整条链路中耗时最长的一环,想要做到每分钟上百个人脸、车牌在毫秒级时间内完成分析识别,就需要芯片具备强大的 NPU 算力支持。海思 XR 芯片平台具备独立的海思专有架构 NPU,高达 9TOPS 的 NPU 算力为这一功能的实现提供了强有力的保障。
用例:基于海思 XR 芯片平台的首款 AR 产品 Rokid Vision
![](https://cdn.shenzhenware.com/uploads%2Fpicture%2Ffile%2F29371%2FRokid_Vision_%E5%9F%BA%E4%BA%8E%E6%B5%B7%E6%80%9D_XR_%E8%8A%AF%E7%89%87.jpeg)
上海海思携手 Rokid 打造的 Rokid Vision 将成为海思 XR 芯片平台的首款 AR 产品。这款双目 AR 产品,使用了最先进的光波导呈像技术,无论是显示亮度、通透度、FoV 等都远远优于市场上现有的产品,Rokid Vision 也有望成为引领行业的一款产品。
上海海思将持续与 Rokid 等所有产业合作伙伴一起努力,通过在海思 XR 芯片平台上的不断创新,为行业提供从芯片、核心算法到软件系统以及 Saas 服务的完整的 XR 产品解决方案, 共同推进 5G 时代 AR/VR 产业和生态发展,共建 AR/VR 产业。
编辑:森林木 / 球盟会登录入口网页版
资讯来源:上海海思