新的 Arm Mali-C55 圖像信號處理器改進(jìn)了基于攝像頭的物聯(lián)網(wǎng)系統(tǒng)
ARM 推出了一種新的圖像信號處理器,以推進(jìn)物聯(lián)網(wǎng)和嵌入式市場的視覺系統(tǒng),具有 8 個同時輸入、HDR 功能和高達(dá) 48 兆像素的圖像大小。
為迎接嵌入式世界,Arm 正在更新其物聯(lián)網(wǎng)產(chǎn)品組合,包括圖像處理和邊緣計算方面的新產(chǎn)品。
新的Mali-C55提供升級的圖像質(zhì)量功能,可在各種照明和天氣條件下工作,并在面積和功率受限的應(yīng)用中實現(xiàn)最高性能和功能,使其成為智能相機(jī)和邊緣 AI 視覺用例的理想選擇。這項先進(jìn)技術(shù)將在多個市場提供改進(jìn)的功能。
新設(shè)計的目標(biāo)是安全和互聯(lián)網(wǎng)協(xié)議 (IP) 攝像頭,這些攝像頭對提高圖像質(zhì)量、分辨率、降低成本和計算機(jī)視覺的需求不斷增長。
監(jiān)控和安全攝像頭將能夠檢測到更重要的細(xì)節(jié)。應(yīng)用程序包括時速高達(dá) 75 英里/小時的車輛中的車牌識別、家用攝像頭和安全系統(tǒng)捕捉內(nèi)外高分辨率圖像,以及智能家居集線器,包括安全視覺解鎖等高級功能。
當(dāng)在具有挑戰(zhàn)性的照明條件下拍攝圖像時,Mali-C55 高動態(tài)范圍 (HDR) 可以補(bǔ)償高光和陰影以提供清晰的場景圖像。
多攝像頭功能和 8K 分辨率
Mali-C55 具有最多 8 個獨立輸入的多攝像頭功能,支持高達(dá) 8K 的圖像分辨率和高達(dá) 48 兆像素 (MP) 的最大圖像尺寸,可提供圖像質(zhì)量、吞吐量、功耗和硅面積。
它以一流的Mali-C52 ISP為基礎(chǔ),通過改進(jìn)的色調(diào)映射和空間降噪、增強(qiáng)對高動態(tài)范圍 (HDR) 傳感器的支持以及與機(jī)器學(xué)習(xí)加速器的無縫集成來利用神經(jīng)網(wǎng)絡(luò)實現(xiàn)無與倫比的圖像質(zhì)量各種去噪技術(shù)。
通過組合多個 Mali-C55 ISP,可以為需要超過 48 MP 功能的應(yīng)用(例如視頻會議)處理更大的圖像。
物聯(lián)網(wǎng)和增強(qiáng)機(jī)器學(xué)習(xí)整體解決方案的一部分
新的 Mali-C55 將成為即將推出的視覺整體解決方案的一部分,該解決方案是 Arm 的物聯(lián)網(wǎng)整體解決方案的一部分。
對于嵌入式和物聯(lián)網(wǎng)視覺應(yīng)用,硅片尺寸和成本是重要因素,Mali-C55 提供這些增強(qiáng)功能的硅片面積幾乎是前幾代產(chǎn)品的一半,顯著降低了功耗以延長電池壽命,并且在此過程中還降低最終產(chǎn)品的成本。
視覺系統(tǒng)需要先進(jìn)的機(jī)器學(xué)習(xí) 隨著機(jī)器學(xué)習(xí)越來越接近邊緣,可以通過將更多 ISP 集成到 SoC 中來利用先進(jìn)的圖像處理。實現(xiàn) Mali-C55 和機(jī)器學(xué)習(xí)加速器之間的輕松集成,在需要高質(zhì)量視覺系統(tǒng)的設(shè)備中提供新水平的設(shè)備處理,因為來自 ISP 的輸出可以直接發(fā)送到 ML 加速器。
“圖像信號處理器 (ISP) 正迅速成為物聯(lián)網(wǎng)中最重要的信息生成設(shè)備之一,因此我們制造這些 ISP 的能力越強(qiáng),它們產(chǎn)生的數(shù)據(jù)就越有價值?!?Arm 的物聯(lián)網(wǎng)和嵌入式副總裁 Mohamed Awad 說?!巴ㄟ^改進(jìn)色調(diào)映射和空間降噪、增強(qiáng)對 HDR 傳感器的支持以及與機(jī)器學(xué)習(xí)加速器的無縫集成,Arm Mali-C55 旨在為許多不同的物聯(lián)網(wǎng)視覺系統(tǒng)應(yīng)用提供更好的圖像質(zhì)量功能——從交通攝像頭到無人機(jī)?!?
與基于 CORTEX 的 SOC 輕松集成
Mali-C55 還包括行業(yè)標(biāo)準(zhǔn) AXI 和 AHB 接口,可輕松與基于 Cortex-A 或 Cortex-M 的 SoC 集成。Mali-C55 ISP 體現(xiàn)了 Arm 對提供行業(yè)領(lǐng)先成像技術(shù)的持續(xù)追求。這項新技術(shù)將使 SoC 架構(gòu)師、成像專家和嵌入式軟件開發(fā)人員能夠在不斷增長的智能相機(jī)和邊緣 AI 視覺市場中創(chuàng)造市場領(lǐng)先的產(chǎn)品。
“真正讓 Mali-C55 與前代產(chǎn)品不同的是它的尺寸;Mali-C55 是 Arm 最小的圖像信號處理器 (ISP),其硅面積僅為前幾代產(chǎn)品的一半。對于許多嵌入式和物聯(lián)網(wǎng)用例,受硅片占用空間的嚴(yán)格限制,這意味著圖像分辨率高達(dá) 8K,而不會影響電池壽命。這對于降低成本和防止在功率受限的環(huán)境(例如安全監(jiān)控系統(tǒng))中降低圖像質(zhì)量而言是一項非常重要的發(fā)展?!? 阿瓦德說?!安粌H如此,Mali-C55 還是我們有史以來最可配置的 ISP,這意味著芯片合作伙伴和 OEM 可以添加或刪除功能以滿足他們的應(yīng)用需求?!?