神經(jīng)處理單元(NPU)加速智能視覺應(yīng)用
Shanghai, China, 9 June 2021 嵌入式和邊緣計算技術(shù)的領(lǐng)先供應(yīng)商德國康佳特推出基于i.MX 8處理器的入門套件,為AI加速智能嵌入式視覺應(yīng)用。該套件搭配基于i.MX 8M Plus處理器的SMARC計算機模塊,其優(yōu)勢在于利用集成恩智浦(NXP)神經(jīng)處理單元(NPU)的新處理器,可以運行推理引擎和庫(如Arm Neural Network (NN) 和 TensorFlow Lite),為基于深度學(xué)習(xí)的人工智能提供多達2.3個TOPS性能。此外,它還與Basler嵌入式視覺軟件無縫集成,為OEM提供了一個用于開發(fā)下一代AI加速嵌入式視覺系統(tǒng)的應(yīng)用就緒型解決方案平臺。廣泛的典型應(yīng)用,涵蓋從價格敏感的零售自動結(jié)帳終端到建筑安全,以及從車內(nèi)導(dǎo)航視覺到公共汽車的監(jiān)控系統(tǒng)。工業(yè)用例包括基于視覺的用戶識別和基于手勢的機器操作組成的人機界面(HMI),以及視覺支持的機器人和工業(yè)質(zhì)量檢測系統(tǒng)。
康佳特產(chǎn)品管理總監(jiān)Martin Danzer解釋道: “一個由TensorFlow等開源AI軟件解決方案支持的神經(jīng)算法專用處理單元,是許多基于視覺系統(tǒng)的效率加速器。所有這些資源整合而成的一個應(yīng)用就緒的硬件和軟件驗證平臺(包括Basler Pylon系列相機軟件套件),助力開發(fā)者進入設(shè)計NPU加速智能視覺應(yīng)用?!?
Basler pylon 相機軟件套件提供統(tǒng)一的軟件開發(fā)工具包(SDK),包括用于MIPI的BCON接口 、USB3和GigE接口的視覺相機,并允許通過源代碼、GUI或第三方軟件訪問相機。高性能pylon查看器完美適合相機評估。得益于集成加速AI視覺應(yīng)用的康佳特i.MX 8M Plus入門套件,工程師可以立即訪問重要的AI支持的機器視覺功能(如觸發(fā)、單個圖像捕獲和高度差異化的相機配置選項,以及基于Arm NN和TensorFlow Lite生態(tài)系統(tǒng)輕松訪問定制推理算法)。
詳細的功能集
AI加速視覺應(yīng)用的新入門套件,包含開發(fā)者立即啟動設(shè)計所需的整套生態(tài)系統(tǒng),即可提供高效視覺和人工智能集成的下一代平臺。入門套件的核心是新型SMARC 2.1模塊conga-SMX8-Plus,其擁有4個功能強大的Arm Cortex®-A53 核心、1個 Arm Cortex®-M72控制器以及加速深度學(xué)習(xí)邊緣算法的恩智浦神經(jīng)處理單元,并提供被動式冷卻。3.5英寸載板conga-SMC1/SMARC-ARM可直接通過MIPI CSI-2.0連接配備F1.8 f4mm透鏡的1300萬像素 Basler dart daA4200-30mci BCON MIPI相機。除了MIPI CSI-2.0,還支持USB和GigE接口的視覺相機。在軟件方面,康佳特提供一個帶有預(yù)先配置的SD卡,包含引導(dǎo)加載程序、Yocto OS鏡像、匹配的BSP和經(jīng)過處理器優(yōu)化的Basler嵌入式視覺軟件,并且能夠根據(jù)捕獲的圖像和視頻序列立即進行AI推理訓(xùn)練。