摘要:随着 5G 网络的发展,VR、AR 等行业可能会焕发新的活力,因为凭借 5G 的低时延和全在线属性可以让 VR 的头显就可以做得非常轻薄,并且成本更低。今日 ( 21 日 ) ,上海海思正式发布
随着 5G 网络的发展,VR、AR 等行业可能会焕发新的活力,因为凭借 5G 的低时延和全在线属性可以让 VR 的头显就可以做得非常轻薄,并且成本更低。
今日 ( 21 日 ) ,上海海思正式发布 XR 芯片平台,推出首款可支持 8K 解码能力,集成 GPU、NPU 的 XR 芯片,首款基于该平台的 AR 眼镜为 Rokid Vision。
海思官方也对这一平台进行了更多解读:
一方面,该 XR 芯片平台支持 8K 硬解码能力,可以支持到单眼 42.7PDD。
以 VR 为例,人眼能达到的理想分辨率大约为 60PPD ( 每度像素数 ) ,一般支持 4KP60 解码能力的芯片能支持的单眼分辨率为 21.3PPD,对应到电视的话只能等效于 480P 的电视显示效果,还远远达不到让人感到舒适和沉浸式的效果。
此次海思发布的 XR 芯片也是从解码能力进行了提升,以提供更清晰的内容呈现效果。
另一方面,该平台加入海思专有架构 NPU,可以提供最高 9TOPS 的 NPU 算力。
AR 产品一个重要应用场景是人脸识别、车牌识别,这需要对 AR 眼镜摄像头中采集到的视频图像进行实时分析,正确识别出每帧图像中的人脸及车牌,将识别到的结果上传到服务器进行比对,并将比对结果实时显示到眼镜中的屏幕上。
从图像采集、分析、上传到显示,耗时越短,速度越快,用户体验越好,而分析阶段是整条链路中耗时最长的一环,想要做到每分钟上百个人脸、车牌在毫秒级时间内完成分析识别,就需要芯片具备强大的 NPU 算力支持。
也是基于这样的考虑,海思对平台架构进行了优化。
该产品正面外观与普通墨镜相似,镜片内侧有两块独立显示屏,具备 40 ° + 视场角 ( FOV ) ,1080P 的 3D 显示效果,采用光波导显示方案,连同镜腿两侧的立体声音响,可为用户带来等同于一台 4 米外 110 寸 3D 高清电视的沉浸体验。
据悉,Rokid Vision 将应用于安防、工业、教育、零售、会展等多个领域,提供更强大、便携、沉浸的体验。
Rokid 也正式宣布加入海思的 XR 芯片平台。此前,Rokid 已与海思一起优化了这一平台专用算法和方案。据
悉,双方对语音、视觉、环境感知等 AI 计算能力做了大量的优化工作,完成了多路视频编解码的高分辨率低延时设计,从芯片规格、系统软件和云端服务多个层面,为 XR 行业提供 AI 交互和多人协同等核心基础能力。
相关文章推荐
新网新人专享,注册领SSL证书百元神券2022-09-15
新网与亚洲诚信达成战略合作,携手共建安全云生态2022-09-06
企业网站没有SSL证书,你将面临......2022-09-27
SSL协议、TLS协议,有什么区别?2022-09-26
网站跳出率高?可能是没装SSL证书2022-09-26