5 月 21 日啤握，上海海思攜手 Rokid 等終端廠家，正式發(fā)布 XR 芯片平臺晶框。該平臺基于一款可以支持 8K 解碼能力和高性能 GPU排抬、NPU 為一體的 XR 芯片。

為了更好的適應(yīng) AR/VR 場景高分辨率授段、廣視角蹲蒲、低延時的特點，上海海思聯(lián)手國內(nèi)領(lǐng)先的 AR 企業(yè) Rokid 共同優(yōu)化了平臺專用的算法和方案侵贵，雙方對語音届搁、視覺、環(huán)境感知等 AI 計算能力做了大量的優(yōu)化工作，完成了多路視頻編解碼的高分辨率低延時設(shè)計卡睦，從芯片規(guī)格宴胧、系統(tǒng)軟件和云端服務(wù)多個層面，為 XR 行業(yè)提供 AI表锻、交互和多人協(xié)同等核心基礎(chǔ)能力恕齐。

現(xiàn)狀：

眾所周知，作為產(chǎn)業(yè)規(guī)模超百億美金瞬逊，市場空間年增長率超過 70% 的新興產(chǎn)業(yè)显歧，AR/VR 的市場已經(jīng)迎來了爆發(fā)式的增長。AR/VR 技術(shù)會在教育码耐、醫(yī)療追迟、娛樂溶其、地產(chǎn)等各個行業(yè)得到全方位的應(yīng)用骚腥，但是目前市場上的 AR/VR 終端產(chǎn)品仍然在體驗上存在著各種問題：

1、設(shè)備分辨率低的問題

以 VR 為例瓶逃，人眼能達(dá)到的理想分辨率大約為 60PPD（每度像素數(shù)）束铭，一般支持 4KP60 解碼能力的芯片能支持的單眼分辨率為 21.3PPD，對應(yīng)到電視的話只能等效于 480P 的電視顯示效果厢绝，還遠(yuǎn)遠(yuǎn)達(dá)不到讓人感到舒適和沉浸式的效果契沫。

而海思 XR 芯片平臺所提供的 8K 的硬解碼能力，可以支持到單眼 42.7PDD昔汉，從解碼能力上看已經(jīng)有了大幅的提升懈万，可以支持消費者體驗到更清晰的內(nèi)容。

2靶病、眩暈問題

眩暈問題一方面和人眼的視覺疲勞有關(guān)会通，而顯示畫質(zhì)差、紗窗娄周、拖尾涕侈、閃爍等過低的畫面質(zhì)量都會引起人眼視覺疲勞，從而造成眩暈煤辨，主要還是由于人體視覺感受器裳涛，平衡感受器和本體感覺各方面不一致或者沖突時造成的眩暈。

往簡單了說就是：眼睛看到動了众辨，但是身體沒有感覺到動端三，或者身體動了，但是眼睛沒有看到動鹃彻。對應(yīng)到 XR 的場景就是由延遲造成的動作和畫面不一致技肩。而延遲的來源一般有兩個因素，一是 CPU 處理性能不足，不能及時處理虚婿；其次是網(wǎng)絡(luò)造成的延遲旋奢。

海思 XR 芯片平臺支持 8 核高性能處理器，強大的 CPU 處理能力能夠大幅提高終端設(shè)備計算的速度然痊，從而避免延時的產(chǎn)生至朗；同時該平臺針對網(wǎng)絡(luò)性能也有針對性的做了協(xié)議上的優(yōu)化，可以有效降低網(wǎng)口處理數(shù)據(jù)導(dǎo)致的延遲剧浸，從而降低眩暈癥的發(fā)生锹引。

3、數(shù)據(jù)分析耗時長唆香、速度慢

AR 產(chǎn)品的一個重要應(yīng)用場景是人臉識別嫌变、車牌識別，這需要對 AR 眼鏡攝像頭中采集到的視頻圖像進(jìn)行實時分析躬它，正確識別出每幀圖像中的人臉及車牌腾啥，將識別到的結(jié)果上傳到服務(wù)器進(jìn)行比對，并將比對結(jié)果實時顯示到眼鏡中的屏幕上冯吓。

從圖像采集倘待、分析、上傳到顯示组贺，耗時越短凸舵，速度越快，用戶體驗越好失尖，而分析階段是整條鏈路中耗時最長的一環(huán)啊奄，想要做到每分鐘上百個人臉、車牌在毫秒級時間內(nèi)完成分析識別掀潮，就需要芯片具備強大的 NPU 算力支持菇夸。海思 XR 芯片平臺具備獨立的海思專有架構(gòu) NPU，高達(dá) 9TOPS 的 NPU 算力為這一功能的實現(xiàn)提供了強有力的保障胧辽。

用例：基于海思 XR 芯片平臺的首款 AR 產(chǎn)品 Rokid Vision

上海海思攜手 Rokid 打造的 Rokid Vision 將成為海思 XR 芯片平臺的首款 AR 產(chǎn)品峻仇。這款雙目 AR 產(chǎn)品，使用了最先進(jìn)的光波導(dǎo)呈像技術(shù)邑商，無論是顯示亮度摄咆、通透度、FoV 等都遠(yuǎn)遠(yuǎn)優(yōu)于市場上現(xiàn)有的產(chǎn)品人断，Rokid Vision 也有望成為引領(lǐng)行業(yè)的一款產(chǎn)品吭从。

上海海思將持續(xù)與 Rokid 等所有產(chǎn)業(yè)合作伙伴一起努力，通過在海思 XR 芯片平臺上的不斷創(chuàng)新恶迈，為行業(yè)提供從芯片涩金、核心算法到軟件系統(tǒng)以及 Saas 服務(wù)的完整的 XR 產(chǎn)品解決方案谱醇， 共同推進(jìn) 5G 時代 AR/VR 產(chǎn)業(yè)和生態(tài)發(fā)展，共建 AR/VR 產(chǎn)業(yè)步做。

編輯：森林木 / 深圳灣

資訊來源：上海海思