安霸、Lumentum和安森美合作開發(fā)基于AI處理的3D感知用于下一代AIoT設(shè)備
人工智能 (AI) 視覺硅公司安霸 (Ambarella, Inc. , 美國納斯達克上市代號:AMBA)、創(chuàng)新光學(xué)和光子產(chǎn)品的領(lǐng)先設(shè)計者和制造商Lumentum (美國納斯達克上市代號:LITE),以及CMOS圖像傳感器方案的領(lǐng)先供應(yīng)商安森美 ,今天美國時間發(fā)布了兩個新的聯(lián)合參考設(shè)計,建基于這3家公司之前針對無接觸訪問系統(tǒng)的聯(lián)合解決方案,加速人工智能物聯(lián)網(wǎng) (AIoT) 設(shè)備在各垂直領(lǐng)域的部署。Ambarella的AI 系統(tǒng)單芯片 (SoC) , 結(jié)合來自Lumentum的高性能垂直腔面發(fā)射激光器 (VCSEL) 陣列照明器和安森美半導(dǎo)體的圖像傳感器數(shù)據(jù),在用于生物識別門禁、3D電子鎖和其它智能感知應(yīng)用的下一代AIoT設(shè)備中可實現(xiàn)更高水平的準確性和更智能的決策。 .
這些新的參考設(shè)計原本用于生物識別門禁和電子鎖,也可滿足智能城市、智能建筑、智能家居和智能醫(yī)療的需求。此外,這些聯(lián)合解決方案提供的高集成度顯著降低系統(tǒng)功耗和熱設(shè)計要求,同時使產(chǎn)品尺寸大大縮小。
Ambarella總裁兼首席執(zhí)行官 (CEO) Fermi Wang說:"Ambarella的愿景是將AI處理與3D和視覺感知相結(jié)合,創(chuàng)造一個環(huán)境智能的未來。我司與Lumentum和安森美的合作將進一步推動AI和物聯(lián)網(wǎng) (IoT) 的融合,以實現(xiàn)新一代門禁系統(tǒng),同時激發(fā)新類別的環(huán)境感知產(chǎn)品--所有這些產(chǎn)品都由使用AI視覺處理器的傳感器融合賦能,以智能和不顯眼的方式與人互動,滿足人們不斷變化的需求。"
Lumentum 3D感知高級副總裁兼總經(jīng)理Téa Williams說:"我們新的聯(lián)合解決方案將大大增加AIoT設(shè)備在各應(yīng)用垂直領(lǐng)域的準確性--從生物識別門禁和電子鎖開始--使它們能夠識別人并預(yù)測他們的需求,而不需要一個直接的人機接口。許多這些應(yīng)用將利用3D感知注入新的數(shù)據(jù)輸入維度以優(yōu)化決策。例如,使用更高分辨率的基于VCSEL的點光源可實現(xiàn)更遠的感知范圍和更高精度的面部識別。這些聯(lián)合解決方案中使用的Lumentum的領(lǐng)先業(yè)界的高性能VCSEL陣列,具有零現(xiàn)場故障的特點,正在推動新的應(yīng)用,幫助實現(xiàn)AIoT設(shè)備具有3D感知能力的夢想。"
安森美工業(yè)和消費類傳感器分部 (ICSD) 副總裁兼總經(jīng)理Gianluca Colli說:“圖像傳感器是智能感知設(shè)備的眼睛,它們看得更遠更細,從而為AIoT設(shè)備中的AI處理器作決策提供顯著的更多信息。我們領(lǐng)先行業(yè)的RGB-IR傳感器技術(shù)結(jié)合Ambarella的AI視覺SoC的先進圖像信號處理 (ISP)能力,可將可見圖像和紅外圖像同時帶給設(shè)備。我們第二代聯(lián)合解決方案采用了客戶的反饋,將RGB-IR圖像傳感器的分辨率提高了四倍,達到4K (800萬像素)。
這三家公司的新的聯(lián)合AIoT解決方案包括兩個參考設(shè)計和附加的3D感知開發(fā)套件,每個都經(jīng)過獨特配置,以滿足結(jié)合AI處理、3D深度感知和視覺感知的特定應(yīng)用需求:
Vision +參考設(shè)計針對下一代生物識別門禁讀卡器,是AIoT行業(yè)首個基于RGB-IR技術(shù)執(zhí)行單攝像頭940 nm結(jié)構(gòu)光感知的4K解決方案。它也是首個利用單芯片方案用于深度處理、AI處理和視頻處理的方案。它基于Ambarella CV22 CVflow?AI視覺處理器,包括由Lumentum的VCSEL技術(shù)賦能的單攝像頭結(jié)構(gòu)光感知,具有2米的范圍,以及安森美的4K (800萬像素) RGB-IR CMOS圖像傳感器。
Saturn參考設(shè)計針對下一代智能電子門鎖 (eLock),適用于商業(yè)和住宅應(yīng)用,是AIoT行業(yè)首個將AI處理集成到單攝像頭結(jié)構(gòu)光感知和快速啟動視頻處理的設(shè)計。它基于Ambarella CV25 CVflow AI視覺處理器,包括一個由Lumentum的VCSEL技術(shù)賦能的結(jié)構(gòu)光攝像頭和安森美的AR0237CS 200萬像素 RGB-IR圖像傳感器。
Ambarella的CV2系列基于CVflow AI視覺處理器的開發(fā)套件針對智能感知應(yīng)用,可用于各垂直領(lǐng)域,現(xiàn)在可配備由Lumentum領(lǐng)先的VCSEL陣列賦能的飛行時間 (ToF)傳感器適配器。這些套件還提供一個選項:4K RGB-IR圖像傳感器適配器。
用于Ambarella的CVflow AI視覺處理器的開放式軟件開發(fā)套件 (SDK),使第三方應(yīng)用程序易于集成,同時使原始設(shè)備制造商 (OEM)能以單個平臺解決不同的區(qū)域要求 (例如,在不同的區(qū)域用不同的AI算法)。此外,這強固的基于Linux的SDK具備以下功能,擴展了邊緣感知設(shè)備的能力,簡化產(chǎn)品開發(fā)并加快上市時間:
定制的應(yīng)用開發(fā)能力
支持不同的3D模式,包括結(jié)構(gòu)光和ToF。獨特的是,一個Ambarella SoC提供3D感知處理,無需專用深度處理器或單獨的主機處理器
攝像頭設(shè)備的高AI推理能力,支持多個神經(jīng)網(wǎng)絡(luò) (NN)同時運行
強固的AI工具,支持深度神經(jīng)網(wǎng)絡(luò) (DNN)開發(fā)和遷移
集成ISP,可處理具挑戰(zhàn)性的場景,包括高動態(tài)范圍 (HDR) 和微光場景
內(nèi)置Arm?處理器以運行客戶應(yīng)用程序
集成安全硬件,包括安全啟動、存儲密鑰的OTP和用于安全密鑰比較的Arm TrustZone技術(shù)
豐富的外設(shè)接口支持,簡化系統(tǒng)設(shè)計