Zinn Labs 推出基于 PROPHESEE 事件視覺傳感器的視線跟蹤系統(tǒng),為 AI 智能鏡框和 VR/MR 系統(tǒng)賦能
2024 年 2 月 6 日,中國上?!猌inn Labs 正式宣布推出業(yè)內(nèi)首款基于事件的視線跟蹤系統(tǒng)(event-based gaze-tracking system),用于增強(qiáng)現(xiàn)實(shí)(VR)和混合現(xiàn)實(shí)(MR)頭顯和智能鏡框。該系統(tǒng)基于 Prophesee 事件視覺傳感解決方案,可實(shí)現(xiàn)更迅速、更高效的眼動(dòng)追蹤,且能耗更低。
Zinn Labs 宣布推出業(yè)內(nèi)首款基于事件的視線跟蹤系統(tǒng)(event-based gaze-tracking system),用于 VR/MR 頭顯和智能鏡框
Zinn Labs 首席執(zhí)行官 Kevin Boyle 表示:"相較于基于視頻的解決方案,Zinn Labs 基于事件的視線跟蹤系統(tǒng)將數(shù)據(jù)帶寬減少了兩個(gè)量級(jí),從而能夠讓能耗滿足以往難以實(shí)現(xiàn)的應(yīng)用和外形尺寸?!?
由于計(jì)算占用量較低,Zinn Labs 的三維視線估計(jì)(3D Gaze Estimation)可以靈活支持低功耗模式,以用于和普通眼鏡外觀相似的智能可穿戴設(shè)備。在其它配置中,該視線跟蹤器能夠以高于 120Hz 的速度實(shí)現(xiàn)低延遲、滑動(dòng)魯棒的跟蹤(slippage-robust tracking),從而賦能高性能應(yīng)用。
使用攝像頭的傳統(tǒng)眼球追蹤與 Zinn Labs 基于事件的注視追蹤
視線跟蹤應(yīng)用
智能眼鏡如今正在迅速發(fā)展,為人們提供了一種可隨時(shí)隨地訪問生成式 AI 的接口。Zinn Labs 的多種應(yīng)用演示已經(jīng)證明,由用戶凝視生成的注意力(Attention)信號(hào)可以將用戶的意圖與 AI 輸出的內(nèi)容無縫銜接。
未來,隨著 AR 和 MR 計(jì)算設(shè)備追求更直觀的用戶交互,視線跟蹤將成為多種組件技術(shù)發(fā)展的先決條件。視線是用戶與數(shù)字環(huán)境最自然的交互方法。借助 Prophesee 事件傳感器 GenX320,Zinn Labs 打造了具備高刷新率和低延遲的視線跟蹤解決方案,能夠助力提升頭顯設(shè)備的響應(yīng)能力和體驗(yàn)的真實(shí)感,對(duì)用戶而言極具吸引力。
Zinn Labs AI 應(yīng)用演示
Zinn Labs DK1 即將推出
Zinn Labs DK1 是一款開發(fā)套件,配備了基于雙目事件視線跟蹤系統(tǒng)和外向攝像頭,并由 Zinn Labs 的 3D 視線估計(jì)算法提供支持。DK1 開發(fā)套件配置了 Prophesee Metavision® 事件視覺傳感器 GenX320,這也是目前市面上尺寸最小的事件視覺傳感器。
Prophesee 首席執(zhí)行官兼聯(lián)合創(chuàng)始人 Luca Verre 表示:"隨著用戶對(duì)實(shí)用性和體驗(yàn)感的要求不斷提高,基于幀(圖像)的采集技術(shù)已無法滿足如今AR/MR 可穿戴設(shè)備和頭顯對(duì)于速度、低延遲、尺寸和功耗的要求。為此,Prophesee 專門設(shè)計(jì)開發(fā)了 GenX320,以滿足對(duì)實(shí)時(shí)性和處理效率的需求,為各種產(chǎn)品提供事件視覺的優(yōu)勢,例如 Zinn Labs 極具突破性 AR/MR 平臺(tái)支持的產(chǎn)品。”
Zinn Labs DK1 開發(fā)套件