2023年10月20日，中國(guó)上?！I(lǐng)先的神經(jīng)擬態(tài)視覺(jué)傳感公司普諾飛思（Prophesee）今日宣布，推出業(yè)界首款專為超低功耗邊緣視覺(jué)設(shè)備集成設(shè)計(jì)的 Metavision® 事件視覺(jué)傳感器 GenX320。該新品為Prophesee第五代Metavision 傳感器產(chǎn)品，采用尺寸為 3x4mm 的裸片。GenX320的推出將 Prophesee開創(chuàng)性的事件視覺(jué)技術(shù)平臺(tái)的應(yīng)用范圍拓寬，擴(kuò)展至快速增長(zhǎng)的邊緣市場(chǎng)領(lǐng)域，覆蓋 AR/VR 設(shè)備、可穿戴設(shè)備、游戲、機(jī)器人、筆記本和平板電腦、物聯(lián)網(wǎng)設(shè)備等。

Prophesee Metavision® 事件視覺(jué)傳感器 GenX320

Prophesee Metavision® 事件視覺(jué)傳感器 GenX320裸片尺寸

Prophesee 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Luca Verre 表示：“事件視覺(jué)傳感器具備卓越的性能及能效，非常適合低功耗邊緣人工智能市場(chǎng)各式各樣的應(yīng)用?；谠谄渌鼞?yīng)用領(lǐng)域取得商業(yè)成功，我們開發(fā)了這款全新的 Metavision 事件視覺(jué)傳感器，專門滿足邊緣系統(tǒng)開發(fā)人員的需求。該款傳感器易于集成、配置和優(yōu)化，適用于運(yùn)動(dòng)和物體檢測(cè)、存在感知、手勢(shì)識(shí)別、眼動(dòng)追蹤，以及其它高增長(zhǎng)市場(chǎng)的多種用例。”

基于 Prophesee 豐富經(jīng)驗(yàn)和多年的技術(shù)積淀，GenX320 事件視覺(jué)傳感器能夠?yàn)楦鞣N應(yīng)用帶來(lái)速度、低延遲、動(dòng)態(tài)范圍和能效方面的優(yōu)勢(shì)。GenX320 事件視覺(jué)傳感器采用 BSI 堆棧式技術(shù)，像素尺寸為 320x320 6.3μm，采用微型的 1/5” 光學(xué)格式，因此，在能源、計(jì)算和尺寸都受制約的嵌入式邊緣視覺(jué)系統(tǒng)中，GenX320 事件視覺(jué)傳感器正契合其對(duì)于高效集成事件視覺(jué)傳感的技術(shù)要求。即使在極具挑戰(zhàn)性的操作和照明條件下，GenX320 仍能以超低功耗提供穩(wěn)定、高速的視覺(jué)感知。

GenX320 帶來(lái)的優(yōu)勢(shì)包括：

?低延遲的事件時(shí)間戳，分辨率為微秒，且數(shù)據(jù)格式靈活。

?片上智能電源管理模式，可將功耗降至 36uW，并支持智能喚醒事件，同時(shí)支持深度睡眠和待機(jī)模式。

?與標(biāo)準(zhǔn) SoC 輕松集成/連接，具備多個(gè)集成事件數(shù)據(jù)預(yù)處理、過(guò)濾和格式化功能，可最大程度地減少外部處理開銷。

?MIPI 或 CPI 數(shù)據(jù)輸出接口為嵌入式處理平臺(tái)（包括低功耗微控制器和現(xiàn)代神經(jīng)擬態(tài)處理器架構(gòu)）提供低延遲連接。

?AI-ready：片上直方圖輸出可兼容多個(gè) AI 加速器。

?傳感器級(jí)別隱私保護(hù)：得益于事件傳感器固有的稀疏無(wú)框事件數(shù)據(jù)，以及靜態(tài)場(chǎng)景去除功能，能夠從傳感器層面保護(hù)隱私。

與 Prophesee Metavision Intelligence 原生兼容，Metavision Intelligence 是當(dāng)前業(yè)界最全面的免費(fèi)事件視覺(jué)軟件套件，目前在全球擁有超過(guò) 10,000 名用戶。

潛在應(yīng)用場(chǎng)景

?用于 AR/VR/XR 頭顯中的注視點(diǎn)渲染或無(wú)縫交互的高速眼動(dòng)追蹤

?消費(fèi)電子設(shè)備（電視、PC、游戲機(jī)、智能家居等）中低延遲、無(wú)接觸的人機(jī)交互界面

?物聯(lián)網(wǎng)攝像頭中的智能存在檢測(cè)和人數(shù)統(tǒng)計(jì)

?超低功耗 always-on 區(qū)域監(jiān)控系統(tǒng)

?家庭及醫(yī)療設(shè)備中檢測(cè)跌倒的攝像頭

Prophesee Metavision事件視覺(jué)傳感器 GenX320, 專為超低功耗邊緣視覺(jué)設(shè)備開發(fā)設(shè)計(jì)

商業(yè)可用

GenX320 現(xiàn)可從 Prophesee 及其銷售合作伙伴處購(gòu)買。GenX320 配套一整套開發(fā)工具，包括裝有板載芯片 (COB) GenX320 模組或緊湊型光學(xué)柔性模組的綜合評(píng)估套件 (Evaluation Kit)，可幫助開發(fā)人員輕松探索和開展優(yōu)化工作。此外，Prophesee 還提供一系列適配器套件，可無(wú)縫連接到各種嵌入式平臺(tái)（例如 STM32 MCU），從而縮短產(chǎn)品上市時(shí)間（Time-to-Market）。

合作客戶

Zinn Labs

“基于 Prophesee Metavision 事件傳感器的獨(dú)特功能，Zinn Labs 正在開發(fā)新一代視線跟蹤系統(tǒng)。 Prophesee 新型 GenX320 傳感器能夠以毫秒為時(shí)間單位，捕捉眼睛和注視動(dòng)作的變化。相比傳統(tǒng)的基于視頻的視線跟蹤模式，使用 GenX320 傳感器，Zinn Labs 能夠以更小的功率及計(jì)算量來(lái)跟蹤眼睛的特征變化（視線追蹤系統(tǒng)的功率低于 20 mW）。此外，由于新款傳感器的封裝尺寸更小，使得事件視覺(jué)傳感器能夠首次應(yīng)用于空間有限的 AR/VR 頭顯設(shè)備中。Zinn Labs 很高興能與 Prophesee 合作，我們正在將 GenX320 傳感器集成到即將推出的客戶項(xiàng)目中?！?

Kevin Boyle

Zinn Labs 創(chuàng)始人兼首席執(zhí)行官

YunX

“YunX 是一家致力于物聯(lián)網(wǎng)技術(shù)與醫(yī)療應(yīng)用的企業(yè)。隨著全球人口老齡化現(xiàn)象日益加劇和醫(yī)療科技的快速發(fā)展，照護(hù)市場(chǎng)迎來(lái)前所未有的機(jī)遇。如何在注重隱私保護(hù)的同時(shí)實(shí)時(shí)提供對(duì)人體更精準(zhǔn)、更可靠的AI 監(jiān)測(cè)分析，成為當(dāng)前的最主要的挑戰(zhàn)。基于Prophesee 所開發(fā)的事件傳感EVS 的Metavision影像技術(shù)，YunX 為這一市場(chǎng)提供了兩種需求兼顧的理想方案，并在其高階產(chǎn)品中已得到功能驗(yàn)證。全新面市的第五代GenX320 傳感器在緊湊性、低功耗和邊緣AI 能力及降低成本方面實(shí)現(xiàn)了重大突破，同時(shí)通過(guò)算法革新在性能上也保持了巨大的優(yōu)勢(shì)?！?

鮑柏君

YunX 首席執(zhí)行長(zhǎng)

XPERI

“每當(dāng)將視覺(jué)技術(shù)應(yīng)用于駕駛員監(jiān)控解決方案（DMS）和電視服務(wù)等產(chǎn)品中時(shí)，隱私總是消費(fèi)者最關(guān)心的問(wèn)題之一。通過(guò) Prophesee Metavision 事件視覺(jué)技術(shù)，我們無(wú)需對(duì)場(chǎng)景進(jìn)行明確的視覺(jué)表征即可理解場(chǎng)景，將我們的“隱私設(shè)計(jì) (PbD)”原則提升至更安全的水平。只需捕獲每個(gè)像素的變化，無(wú)需像傳統(tǒng)圖像傳感器那樣捕獲整個(gè)場(chǎng)景，我們的算法可通過(guò)捕獲的內(nèi)容來(lái)感知到場(chǎng)景中的細(xì)節(jié)，不用再對(duì)其進(jìn)行詳細(xì)表征。我們還開發(fā)了一個(gè)概念驗(yàn)證演示，證明使用神經(jīng)擬態(tài)傳感器完全可以實(shí)現(xiàn)駕駛員監(jiān)控解決方案。使用 1MP 神經(jīng)擬態(tài)傳感器，我們可以推斷出與基于主動(dòng) NIR 照明 2MP 視覺(jué)傳感器的解決方案類似的性能。未來(lái)，我們將重點(diǎn)關(guān)注GenX320 神經(jīng)形態(tài)傳感器，它適用于隱私敏感的智能設(shè)備，將幫助我們進(jìn)一步提升用戶體驗(yàn)。”

Petronel Bigioi

XPERI 首席技術(shù)官

ULTRALEAP

“通過(guò)在 Ultra Leap 的 TouchFree 應(yīng)用中的高精度手勢(shì)識(shí)別和手部跟蹤功能，我們看到了 Prophesee 事件視覺(jué)傳感器在實(shí)現(xiàn)無(wú)接觸交互方面的優(yōu)勢(shì)。Prophesee 事件視覺(jué)傳感器能夠在極具挑戰(zhàn)性的環(huán)境條件下，以極為高效的能耗水平和低系統(tǒng)延遲運(yùn)行，從而增強(qiáng)我們無(wú)接觸用戶界面（UI）的整體用戶體驗(yàn)和直觀性。隨著新款 Genx320 傳感器的推出，將有更多的應(yīng)用和設(shè)備，包括電池供電的小型系統(tǒng)以及不斷增加的無(wú)接觸式用例，都將受益于事件視覺(jué)傳感器的穩(wěn)健性、低功耗、低延遲以及高動(dòng)態(tài)范圍的優(yōu)勢(shì)，進(jìn)一步提升各類數(shù)字內(nèi)容交互的便利性和易用性?！?

Tom Carter

ULTRALEAP 聯(lián)合創(chuàng)始人兼首席執(zhí)行官