新的 Arm Mali-C55 圖像信號處理器改進了基于攝像頭的物聯網系統(tǒng)
ARM 推出了一種新的圖像信號處理器,以推進物聯網和嵌入式市場的視覺系統(tǒng),具有 8 個同時輸入、HDR 功能和高達 48 兆像素的圖像大小。
為迎接嵌入式世界,Arm 正在更新其物聯網產品組合,包括圖像處理和邊緣計算方面的新產品。
新的Mali-C55提供升級的圖像質量功能,可在各種照明和天氣條件下工作,并在面積和功率受限的應用中實現最高性能和功能,使其成為智能相機和邊緣 AI 視覺用例的理想選擇。這項先進技術將在多個市場提供改進的功能。
新設計的目標是安全和互聯網協(xié)議 (IP) 攝像頭,這些攝像頭對提高圖像質量、分辨率、降低成本和計算機視覺的需求不斷增長。
監(jiān)控和安全攝像頭將能夠檢測到更重要的細節(jié)。應用程序包括時速高達 75 英里/小時的車輛中的車牌識別、家用攝像頭和安全系統(tǒng)捕捉內外高分辨率圖像,以及智能家居集線器,包括安全視覺解鎖等高級功能。
當在具有挑戰(zhàn)性的照明條件下拍攝圖像時,Mali-C55 高動態(tài)范圍 (HDR) 可以補償高光和陰影以提供清晰的場景圖像。
多攝像頭功能和 8K 分辨率
Mali-C55 具有最多 8 個獨立輸入的多攝像頭功能,支持高達 8K 的圖像分辨率和高達 48 兆像素 (MP) 的最大圖像尺寸,可提供圖像質量、吞吐量、功耗和硅面積。
它以一流的Mali-C52 ISP為基礎,通過改進的色調映射和空間降噪、增強對高動態(tài)范圍 (HDR) 傳感器的支持以及與機器學習加速器的無縫集成來利用神經網絡實現無與倫比的圖像質量各種去噪技術。
通過組合多個 Mali-C55 ISP,可以為需要超過 48 MP 功能的應用(例如視頻會議)處理更大的圖像。
物聯網和增強機器學習整體解決方案的一部分
新的 Mali-C55 將成為即將推出的視覺整體解決方案的一部分,該解決方案是 Arm 的物聯網整體解決方案的一部分。
對于嵌入式和物聯網視覺應用,硅片尺寸和成本是重要因素,Mali-C55 提供這些增強功能的硅片面積幾乎是前幾代產品的一半,顯著降低了功耗以延長電池壽命,并且在此過程中還降低最終產品的成本。
視覺系統(tǒng)需要先進的機器學習 隨著機器學習越來越接近邊緣,可以通過將更多 ISP 集成到 SoC 中來利用先進的圖像處理。實現 Mali-C55 和機器學習加速器之間的輕松集成,在需要高質量視覺系統(tǒng)的設備中提供新水平的設備處理,因為來自 ISP 的輸出可以直接發(fā)送到 ML 加速器。
“圖像信號處理器 (ISP) 正迅速成為物聯網中最重要的信息生成設備之一,因此我們制造這些 ISP 的能力越強,它們產生的數據就越有價值?!?Arm 的物聯網和嵌入式副總裁 Mohamed Awad 說?!巴ㄟ^改進色調映射和空間降噪、增強對 HDR 傳感器的支持以及與機器學習加速器的無縫集成,Arm Mali-C55 旨在為許多不同的物聯網視覺系統(tǒng)應用提供更好的圖像質量功能——從交通攝像頭到無人機?!?
與基于 CORTEX 的 SOC 輕松集成
Mali-C55 還包括行業(yè)標準 AXI 和 AHB 接口,可輕松與基于 Cortex-A 或 Cortex-M 的 SoC 集成。Mali-C55 ISP 體現了 Arm 對提供行業(yè)領先成像技術的持續(xù)追求。這項新技術將使 SoC 架構師、成像專家和嵌入式軟件開發(fā)人員能夠在不斷增長的智能相機和邊緣 AI 視覺市場中創(chuàng)造市場領先的產品。
“真正讓 Mali-C55 與前代產品不同的是它的尺寸;Mali-C55 是 Arm 最小的圖像信號處理器 (ISP),其硅面積僅為前幾代產品的一半。對于許多嵌入式和物聯網用例,受硅片占用空間的嚴格限制,這意味著圖像分辨率高達 8K,而不會影響電池壽命。這對于降低成本和防止在功率受限的環(huán)境(例如安全監(jiān)控系統(tǒng))中降低圖像質量而言是一項非常重要的發(fā)展。” 阿瓦德說。“不僅如此,Mali-C55 還是我們有史以來最可配置的 ISP,這意味著芯片合作伙伴和 OEM 可以添加或刪除功能以滿足他們的應用需求。”