1月2日，云知聲在京公布多模態(tài)AI 芯片戰(zhàn)略與規(guī)劃，同時曝光了正在研發(fā)中的多款定位不同場景的AI芯片，包括第二代物聯(lián)網(wǎng)語音AI 芯片雨燕 Lite、面向智慧城市的支持圖像與語音計算的多模態(tài)AI 芯片海豚(Dolphin)，以及面向智慧出行的車規(guī)級多模態(tài)AI 芯片雪豹(Leopard)。

據(jù)云知聲聯(lián)合創(chuàng)始人李霄寒透露，雨燕Lite、海豚、雪豹三款芯片將分別計劃于2019年第二季度及三四季度量產(chǎn)。

為推動多模態(tài)AI芯片的落地，云知聲也進行了一系列技術(shù)布局。據(jù)介紹，其面向機器視覺的輕量級圖像信號處理器已可實現(xiàn)在不依賴外部內(nèi)存的情況下，在30 fps 的速率下實時對傳感器的圖片進行預(yù)處理。借助基于人臉信息分析的多模態(tài)技術(shù)，已可實現(xiàn)人臉/物體識別、表情分析、標簽化、唇動狀態(tài)跟蹤等功能。

云知聲還發(fā)布了多模態(tài)人工智能核心IP：DeepNet2.0 ，它可兼容 LSTM/CNN/RNN/TDNN 等多種推理網(wǎng)絡(luò)，支持可重構(gòu)計算與Winograd 處理，最高可配置算力達4T。目前云知聲DeepNet2.0 已在 FPGA 上得到驗證，將在2019 年落地的全新多模態(tài) AI 芯片海豚(Dolphin)上落地。

李霄寒指出，當前物聯(lián)網(wǎng)產(chǎn)品線的 AI 芯片越來越明顯地體現(xiàn)出場景化、端云互動和數(shù)據(jù)多模態(tài)三個趨勢。因此，李霄寒認為，物聯(lián)網(wǎng)AI 芯片的最終呈現(xiàn)形式將不再是一個單一的硬件，而必然是承載著邊緣能力與云端能力的多模態(tài)AI 軟硬一體解決方案。

資料顯示，2018年5月16日，云知聲正式發(fā)布了物聯(lián)網(wǎng)AI 芯片雨燕，該芯片采用云知聲自主 AI 指令集，擁有具備完整自主知識產(chǎn)權(quán)的DeepNet1.0、uDSP(數(shù)字信號處理器)，并支持DNN/LSTM/CNN等多種深度神經(jīng)網(wǎng)絡(luò)模型，性能較通用方案提升超50 倍。

去年9月，云知聲選擇將基于雨燕的解決方案開源，并正式推出智能家居、智能音箱兩套解決方案。目前，基于雨燕芯片的全棧解決方案已導(dǎo)入的各類方案商及合作伙伴已超過10 家，包括美的、奧克斯、海信、京東、360、中國平安、硬蛋科技等，相關(guān)產(chǎn)品最早將于2019年一季度量產(chǎn)上市。