新的 Arm Mali-C55 圖像信號(hào)處理器改進(jìn)了基于攝像頭的物聯(lián)網(wǎng)系統(tǒng)
ARM 推出了一種新的圖像信號(hào)處理器,以推進(jìn)物聯(lián)網(wǎng)和嵌入式市場(chǎng)的視覺(jué)系統(tǒng),具有 8 個(gè)同時(shí)輸入、HDR 功能和高達(dá) 48 兆像素的圖像大小。
為迎接嵌入式世界,Arm 正在更新其物聯(lián)網(wǎng)產(chǎn)品組合,包括圖像處理和邊緣計(jì)算方面的新產(chǎn)品。
新的Mali-C55提供升級(jí)的圖像質(zhì)量功能,可在各種照明和天氣條件下工作,并在面積和功率受限的應(yīng)用中實(shí)現(xiàn)最高性能和功能,使其成為智能相機(jī)和邊緣 AI 視覺(jué)用例的理想選擇。這項(xiàng)先進(jìn)技術(shù)將在多個(gè)市場(chǎng)提供改進(jìn)的功能。
新設(shè)計(jì)的目標(biāo)是安全和互聯(lián)網(wǎng)協(xié)議 (IP) 攝像頭,這些攝像頭對(duì)提高圖像質(zhì)量、分辨率、降低成本和計(jì)算機(jī)視覺(jué)的需求不斷增長(zhǎng)。
監(jiān)控和安全攝像頭將能夠檢測(cè)到更重要的細(xì)節(jié)。應(yīng)用程序包括時(shí)速高達(dá) 75 英里/小時(shí)的車(chē)輛中的車(chē)牌識(shí)別、家用攝像頭和安全系統(tǒng)捕捉內(nèi)外高分辨率圖像,以及智能家居集線(xiàn)器,包括安全視覺(jué)解鎖等高級(jí)功能。
當(dāng)在具有挑戰(zhàn)性的照明條件下拍攝圖像時(shí),Mali-C55 高動(dòng)態(tài)范圍 (HDR) 可以補(bǔ)償高光和陰影以提供清晰的場(chǎng)景圖像。
多攝像頭功能和 8K 分辨率
Mali-C55 具有最多 8 個(gè)獨(dú)立輸入的多攝像頭功能,支持高達(dá) 8K 的圖像分辨率和高達(dá) 48 兆像素 (MP) 的最大圖像尺寸,可提供圖像質(zhì)量、吞吐量、功耗和硅面積。
它以一流的Mali-C52 ISP為基礎(chǔ),通過(guò)改進(jìn)的色調(diào)映射和空間降噪、增強(qiáng)對(duì)高動(dòng)態(tài)范圍 (HDR) 傳感器的支持以及與機(jī)器學(xué)習(xí)加速器的無(wú)縫集成來(lái)利用神經(jīng)網(wǎng)絡(luò)實(shí)現(xiàn)無(wú)與倫比的圖像質(zhì)量各種去噪技術(shù)。
通過(guò)組合多個(gè) Mali-C55 ISP,可以為需要超過(guò) 48 MP 功能的應(yīng)用(例如視頻會(huì)議)處理更大的圖像。
物聯(lián)網(wǎng)和增強(qiáng)機(jī)器學(xué)習(xí)整體解決方案的一部分
新的 Mali-C55 將成為即將推出的視覺(jué)整體解決方案的一部分,該解決方案是 Arm 的物聯(lián)網(wǎng)整體解決方案的一部分。
對(duì)于嵌入式和物聯(lián)網(wǎng)視覺(jué)應(yīng)用,硅片尺寸和成本是重要因素,Mali-C55 提供這些增強(qiáng)功能的硅片面積幾乎是前幾代產(chǎn)品的一半,顯著降低了功耗以延長(zhǎng)電池壽命,并且在此過(guò)程中還降低最終產(chǎn)品的成本。
視覺(jué)系統(tǒng)需要先進(jìn)的機(jī)器學(xué)習(xí) 隨著機(jī)器學(xué)習(xí)越來(lái)越接近邊緣,可以通過(guò)將更多 ISP 集成到 SoC 中來(lái)利用先進(jìn)的圖像處理。實(shí)現(xiàn) Mali-C55 和機(jī)器學(xué)習(xí)加速器之間的輕松集成,在需要高質(zhì)量視覺(jué)系統(tǒng)的設(shè)備中提供新水平的設(shè)備處理,因?yàn)閬?lái)自 ISP 的輸出可以直接發(fā)送到 ML 加速器。
“圖像信號(hào)處理器 (ISP) 正迅速成為物聯(lián)網(wǎng)中最重要的信息生成設(shè)備之一,因此我們制造這些 ISP 的能力越強(qiáng),它們產(chǎn)生的數(shù)據(jù)就越有價(jià)值?!?Arm 的物聯(lián)網(wǎng)和嵌入式副總裁 Mohamed Awad 說(shuō)。“通過(guò)改進(jìn)色調(diào)映射和空間降噪、增強(qiáng)對(duì) HDR 傳感器的支持以及與機(jī)器學(xué)習(xí)加速器的無(wú)縫集成,Arm Mali-C55 旨在為許多不同的物聯(lián)網(wǎng)視覺(jué)系統(tǒng)應(yīng)用提供更好的圖像質(zhì)量功能——從交通攝像頭到無(wú)人機(jī)?!?
與基于 CORTEX 的 SOC 輕松集成
Mali-C55 還包括行業(yè)標(biāo)準(zhǔn) AXI 和 AHB 接口,可輕松與基于 Cortex-A 或 Cortex-M 的 SoC 集成。Mali-C55 ISP 體現(xiàn)了 Arm 對(duì)提供行業(yè)領(lǐng)先成像技術(shù)的持續(xù)追求。這項(xiàng)新技術(shù)將使 SoC 架構(gòu)師、成像專(zhuān)家和嵌入式軟件開(kāi)發(fā)人員能夠在不斷增長(zhǎng)的智能相機(jī)和邊緣 AI 視覺(jué)市場(chǎng)中創(chuàng)造市場(chǎng)領(lǐng)先的產(chǎn)品。
“真正讓 Mali-C55 與前代產(chǎn)品不同的是它的尺寸;Mali-C55 是 Arm 最小的圖像信號(hào)處理器 (ISP),其硅面積僅為前幾代產(chǎn)品的一半。對(duì)于許多嵌入式和物聯(lián)網(wǎng)用例,受硅片占用空間的嚴(yán)格限制,這意味著圖像分辨率高達(dá) 8K,而不會(huì)影響電池壽命。這對(duì)于降低成本和防止在功率受限的環(huán)境(例如安全監(jiān)控系統(tǒng))中降低圖像質(zhì)量而言是一項(xiàng)非常重要的發(fā)展。” 阿瓦德說(shuō)?!安粌H如此,Mali-C55 還是我們有史以來(lái)最可配置的 ISP,這意味著芯片合作伙伴和 OEM 可以添加或刪除功能以滿(mǎn)足他們的應(yīng)用需求?!?