2019 年開年的第一槍，云知聲亮出了自家多模態(tài) AI 芯片戰(zhàn)略與規(guī)劃述么，以及三款 AI 芯片。

1 月 2 日愕掏，云知聲在北京舉行了發(fā)布會(huì)度秘，正式公布了多模態(tài) AI 芯片戰(zhàn)略與規(guī)劃，并曝光多款正在研發(fā)中的不同場景 AI 芯片饵撑，其中剑梳，包括第二代物聯(lián)網(wǎng)語音 AI 芯片雨燕 Lite、面向智慧城市的支持圖像與語音計(jì)算的多模態(tài) AI 芯片海豚（Dolphin）滑潘，以及面向智慧出行的車規(guī)級多模態(tài) AI 芯片雪豹（Leopard）垢乙。

借著這次發(fā)布會(huì)，云知聲創(chuàng)始人& CEO 黃偉對傳統(tǒng) SOC（System On Chip）概念提出全新定義语卤，其中 S 代表不同的 AI 服務(wù)能力即 Skills追逮，O 代表云端與邊緣側(cè)的互動(dòng) On/Off Cloud酪刀，C 代表具備智能處理能力的 AI 芯片。

黃偉表示钮孵，面向 5G 萬物智聯(lián)時(shí)代骂倘，人工智能服務(wù)需提供更加場景化的解決方案，云+芯一體化的服務(wù)模式將成為行業(yè)主流巴席。

AI 芯片的三個(gè)趨勢：場景化历涝、端云互動(dòng)、數(shù)據(jù)多模態(tài)

在第一代 UniOne 芯片雨燕的發(fā)布會(huì)上漾唉，云知聲聯(lián)合創(chuàng)始人李霄寒曾指出荧库， UniOne 并不是一顆芯片，而是一系列芯片毡证，代表了云知聲對于物聯(lián)網(wǎng) AI 芯片發(fā)展戰(zhàn)略的整體構(gòu)想。

在今日舉行的云知聲 2019 多模態(tài) AI 芯片戰(zhàn)略發(fā)布會(huì)上蔫仙，李霄寒再次從三方面論證了物聯(lián)網(wǎng)多模態(tài) AI 芯片的必要性料睛。

他認(rèn)為，當(dāng)前物聯(lián)網(wǎng)產(chǎn)品線的 AI 芯片越來越明顯地體現(xiàn)出三個(gè)趨勢：

1. 場景化摇邦。芯片設(shè)計(jì)正在由原來的片面追求 PPA 恤煞，即性能（Power）、功耗（Performance）和面積（Area）逐漸演變成基于軟硬一體施籍，甚至包括云端服務(wù)的方式來解決某個(gè)垂直領(lǐng)域的具體問題居扒，芯片本身上升成為整個(gè)解決方案中的重要部分，而非唯一丑慎。

2. 端云互動(dòng)喜喂。在物聯(lián)網(wǎng)的不同應(yīng)用場景下，海量終端設(shè)備要實(shí)現(xiàn)功能智能化必須端云配合竿裂，即形成邊緣算力和云端算力的動(dòng)態(tài)平衡玉吁。端云互動(dòng)的命題需要 AI 芯片的強(qiáng)有力支持，進(jìn)一步也深刻影響到芯片的設(shè)計(jì)腻异，以及最終的交付进副。

3. 數(shù)據(jù)多模態(tài)。在以 5G 驅(qū)動(dòng)的萬物智聯(lián)場景下悔常，芯片所接觸到的數(shù)據(jù)維度將由原來的單一化走向多元化影斑，芯片所需處理的數(shù)據(jù)也由單模態(tài)變成多模態(tài)，這對芯片尤其是物聯(lián)網(wǎng)人工智能芯片的設(shè)計(jì)提出了新的挑戰(zhàn)机打。

結(jié)合以上三點(diǎn)矫户，李霄寒認(rèn)為，物聯(lián)網(wǎng) AI 芯片的最終呈現(xiàn)形式將不再是一個(gè)單一的硬件残邀，而必然是承載著邊緣能力與云端能力的多模態(tài) AI 軟硬一體解決方案吏垮。

布局多模態(tài) AI 芯技術(shù)障涯，發(fā)布多模態(tài)人工智能核心 IP「DeepNet 2.0」

有了第一代量產(chǎn)芯片雨燕的經(jīng)驗(yàn)，云知聲在 AI 芯片的打法也有了更加明顯的章法膳汪。本次發(fā)布會(huì)上唯蝶，云知聲發(fā)布了多模態(tài)人工智能核心 IP——DeepNet2.0，宣告云知聲人工智能處理核心由 1.0 語音時(shí)代全面邁入 2.0 融合語音遗嗽、圖像等處理能力的多模態(tài)時(shí)代粘我。

DeepNet2.0 可兼容 LSTM/CNN/RNN/TDNN 等多種推理網(wǎng)絡(luò)，支持可重構(gòu)計(jì)算與 Winograd 處理痹换，最高可配置算力達(dá) 4T征字。目前，云知聲 DeepNet2.0 已在 FPGA 上得到驗(yàn)證娇豫，將在 2019 年落地的全新多模態(tài) AI 芯片海豚（Dolphin）上落地匙姜。

為實(shí)現(xiàn)多模態(tài) AI 芯片的戰(zhàn)略落地，此前冯痢，云知聲在機(jī)器視覺領(lǐng)域做了大量的工作氮昧。根據(jù)介紹，云知聲面向機(jī)器視覺的輕量級圖像信號處理器已可實(shí)現(xiàn)在不依賴外部內(nèi)存的情況下浦楣，在 30 fps 的速率下實(shí)時(shí)對傳感器的圖片進(jìn)行預(yù)處理袖肥，以進(jìn)一步提高后續(xù)機(jī)器視覺處理模塊的處理速度和效果。借助基于人臉信息分析的多模態(tài)技術(shù)振劳，已可實(shí)現(xiàn)人臉/物體識(shí)別椎组、表情分析、標(biāo)簽化历恐、唇動(dòng)狀態(tài)跟蹤等功能寸癌，可為產(chǎn)品交互和用戶體驗(yàn)提供更多的可玩性和靈活性。

此外弱贼，在圖像與芯片技術(shù)的產(chǎn)學(xué)研合作方面灵份，云知聲還與杜克大學(xué)所領(lǐng)導(dǎo)的美國自然科學(xué)基金旗下唯一人工智能計(jì)算中心——ASIC 達(dá)成深度合作，致力于 AI 芯片算法壓縮與量化技術(shù),以及非馮新型 AI 芯片計(jì)算架構(gòu)研究哮洽，將進(jìn)一步為云知聲多模態(tài) AI 芯片戰(zhàn)略的推進(jìn)夯實(shí)基礎(chǔ)填渠。

三款在研芯片：雨燕 Lite、海豚鸟辅、雪豹

發(fā)布會(huì)上氛什，李霄寒透露，在持續(xù)迭代升級現(xiàn)有雨燕芯片的性能與服務(wù)之外匪凉，目前云知聲多款面向不同方向的芯片也已在研發(fā)中：

• 適用性更廣的超輕量級物聯(lián)網(wǎng)語音 AI 芯片雨燕 Lite枪眉；

• 集成云知聲最先進(jìn)神經(jīng)網(wǎng)絡(luò)處理器 DeepNet2.0、可面向智慧城市場景提供對語音和圖像等多模態(tài)計(jì)算支持的多模態(tài) AI 芯片海豚（Dolphin）再层；

• 與吉利集團(tuán)旗下生態(tài)鏈企業(yè)億咖通科技共同打造的面向智慧出行場景的多模態(tài)車規(guī)級 AI 芯片雪豹（Leopard）贸铜。

以上三款芯片計(jì)劃于 2019 年啟動(dòng)量產(chǎn)堡纬。

從 IVM 到雨燕，云知聲的造芯之路

云知聲 2014 年開始切入物聯(lián)網(wǎng) AI 硬件芯片方案（IVM）蒿秦，并于 2015 年開始形成量產(chǎn)出貨烤镐，其中家居領(lǐng)域客戶覆蓋格力、美的棍鳖、海爾炮叶、長虹、海信渡处、華帝等幾乎所有國內(nèi)一線家電廠商镜悉。在深入場景提供服務(wù)的過程中，為彌補(bǔ)通用芯片方案在給定成本和功耗條件下的能效比問題医瘫，以及在邊緣算力侣肄、多模態(tài) AI 數(shù)據(jù)處理方面的能力短板，2015 年云知聲正式啟動(dòng)自研 AI 芯片計(jì)劃醇份。

2018 年 5 月16 日稼锅，云知聲正式發(fā)布了首款自主研發(fā)的物聯(lián)網(wǎng) AI 芯片雨燕。該芯片采用云知聲自主 AI 指令集被芳，擁有具備完整自主知識(shí)產(chǎn)權(quán)的 DeepNet1.0缰贝、uDSP（數(shù)字信號處理器）馍悟，并支持 DNN/LSTM/CNN 等多種深度神經(jīng)網(wǎng)絡(luò)模型畔濒，性能較通用方案提升超 50 倍。

四個(gè)月后锣咒，云知聲將基于雨燕的解決方案進(jìn)行開源侵状，并推出智能家居、智能音箱的兩套標(biāo)桿解決方案毅整。通過「云端芯」結(jié)合趣兄，提供給客戶與合作伙伴面向具體場景的軟硬件一體化 Turnkey 解決方案，可讓客戶站在更高的設(shè)計(jì)起點(diǎn)悼嫉、以更低的成本艇潭，在更短的時(shí)間周期內(nèi)打造出更穩(wěn)定可靠的產(chǎn)品。同時(shí)戏蔑，開源的方案也可確碧Ｄ客戶基于已提供的 AI 能力自行設(shè)計(jì)其它各種長尾產(chǎn)品形態(tài)，構(gòu)建更為豐富的 AIoT 生態(tài)总棵。

目前鳍寂，基于雨燕芯片的全棧解決方案已導(dǎo)入的各類方案商及合作伙伴已超過 10 家，相關(guān)產(chǎn)品最早將于 Q1 量產(chǎn)上市情龄；云知聲的業(yè)務(wù)已經(jīng)覆蓋包括智能家居迄汛、智能汽車捍壤、智能兒童機(jī)器人、智慧酒店鞍爱、智慧交通等諸多場景鹃觉。

李霄寒表示，未來硬霍，云知聲將持續(xù)發(fā)力多模態(tài) AI 芯片帜慢，不斷拓展技術(shù)與場景生態(tài)，以實(shí)現(xiàn)面向未來 AIoT 時(shí)代的全面賦能唯卖。