新思科技近日推出其全新的DesignWareARCEV7x嵌入式視覺(jué)處理器系列，配備深度神經(jīng)網(wǎng)絡(luò)(DNN)加速器，適用于機(jī)器學(xué)習(xí)和人工智能(AI)邊緣應(yīng)用。ARC EV7x視覺(jué)處理器集成了多達(dá)四個(gè)增強(qiáng)視覺(jué)處理單元(VPU)和一個(gè)DNN加速器(最多擁有14080個(gè)MAC)，典型條件下可在16納米FinFET工藝技術(shù)中提供高達(dá)35 TOPS的性能，是ARC EV6x處理器的4倍。

(圖片來(lái)源：新思科技)

新思科技EV處理器產(chǎn)品營(yíng)銷總監(jiān)Gordon Cooper表示，EV7x處理器是EV6x處理器的優(yōu)化版本，但是不只是增加了4倍的MAC，增加MAC只是增強(qiáng)CNN(卷積神經(jīng)網(wǎng)絡(luò))圖形性能的一個(gè)簡(jiǎn)單部分，真正關(guān)鍵的是改善了外部?jī)?nèi)存訪問(wèn)所需的內(nèi)存帶寬，從而使其功耗降至最低。新型處理器處理帶寬的方式使其運(yùn)算能力能夠擴(kuò)展至100TOPS，因而能夠使用更低成本的DRAM接口。

此外，需要高級(jí)圖像測(cè)繪工具在增加的MAC上劃分CNN圖形，與EV6x處理器相比，EV7x處理器每秒幀吞吐量提升了65%。

DesignWare ARC EV7x視覺(jué)處理器的異構(gòu)多核架構(gòu)包括多達(dá)四個(gè)高性能VPU。每個(gè)EV7x VPU包含一個(gè)32位標(biāo)量單元和一個(gè)512位寬矢量DSP，可配置為8位、16位或32位運(yùn)算，用于在不同的數(shù)據(jù)流上同時(shí)進(jìn)行乘法-累加。新思科技表示，該DNN加速器采用了一種特殊架構(gòu)，與其他神經(jīng)網(wǎng)絡(luò)IP相比，能夠更快訪問(wèn)內(nèi)存、性能更高且功效更好。除了支持CNN，該DNN加速器還支持批量的LSTM(長(zhǎng)短期記憶)，用于需要基于時(shí)間序列的應(yīng)用，例如根據(jù)觀察到的路徑和速度預(yù)測(cè)行人的位置。

此外，該視覺(jué)引擎與DNN加速器并行工作，使得EV7x對(duì)于自動(dòng)駕駛汽車和ADAS的應(yīng)用特別高效，因?yàn)榇祟悜?yīng)用中需要多個(gè)攝像頭和視覺(jué)算法同時(shí)運(yùn)行。

新款EV7x處理器還重視安全性，從芯片內(nèi)存到視覺(jué)引擎和DNN加速器的數(shù)據(jù)傳輸會(huì)受到可選擇的AES-XTS加密引擎的保護(hù)。該引擎可以防止訓(xùn)練數(shù)據(jù)集以及面部識(shí)別和視網(wǎng)膜掃描等個(gè)人生物數(shù)據(jù)被利用。

ARC EV7x Vision視覺(jué)處理器系列由MetaWare EV開(kāi)發(fā)工具包提供支持，后者是一個(gè)基于通用嵌入式視覺(jué)標(biāo)準(zhǔn)(包括OpenVX和OpenCL C)的綜合高生產(chǎn)力軟件開(kāi)發(fā)環(huán)境。該工具套件能夠在EV7x處理器的視覺(jué)引擎上開(kāi)發(fā)高效的計(jì)算機(jī)視覺(jué)應(yīng)用，以及在專用的DNN加速器上自動(dòng)映射和優(yōu)化神經(jīng)網(wǎng)絡(luò)圖。映射工具支持Caffe和Tensorflow框架，以及ONNX神經(jīng)網(wǎng)絡(luò)交換格式。該嵌入式ARC EV7x視覺(jué)處理器結(jié)合高性能視覺(jué)引擎和DNN加速器以及編程工具，可適用于各種視覺(jué)應(yīng)用。