最近,Arm發布Mali-C55新一代高性能、低面積、易配置、超高清圖像處理器IP,以及相應的軟件和工具鏈,便于開發者使用和配置這些先進的圖像處理能力。
據悉,瑞薩電子(Renesas)已經率先選用了Arm的Mali-C55。搭載Mali-C55的芯片跟終端設備有望在2023年面市。
Arm為何在此時推出Mali-C55ISP IP,該IP有哪些獨特之處呢,Arm物聯網兼嵌入式事業部業務拓展副總裁馬健Chloe Ma向電子發燒友網等科技媒體做了詳細的解讀。
面向智能攝像頭的Arm Mali-C55
市場數據顯示,商用和消費類智能攝像頭市場規模,從2021年250億美元,有望2025 年達到450億美元。高速增長的視覺應用正在逐漸深入各行各業,包括支持高清商務視頻會議、安防/智能監控、智慧城市,乃至電池供電的可視門鈴和智能貓眼等應用非常廣泛。
在性能方面,Mali-C55的吞吐量高達1.2Gpix/sec,支持高達8路的多流處理。在圖像處理品質方面,Mali-C55 不僅可以輕松處理8K高清,高達4800萬像素分辨率,而且還顯著提高了色調映射和降噪能力。
ArmMali-C55在性能大幅度提升的同時,對面積做了深度優化,Mali-C55僅用一半的芯片面積就實現了品質和性能的提升,更適用于低功耗智能終端和邊緣應用,也進一步將圖像處理和AI在邊側完美結合,提升了邊緣AI的性能。
由于IP的模塊化設計,Mali-C55 更易于配置,可以支持各種畫質、性能、能耗、面積的組合,能夠觸及更多的用例。與此同時,Mali-C55 也更易于整合,包括與ML加速器整合實現邊緣智能終端上本地視頻數據處理,以及通過標準的AXI和AHB接口,與現有的Arm Cortex-A和Cortex-M系列的CPU進行無縫對接。
Chloe Ma分析,高可配置性方面,客戶和合作伙伴們可以根據他們的目標應用所需要的特性和功能對Mali-C55 以及其他芯片上的IP 做一些精準配置,這樣更能實現低延時、低能耗、面積優化的設計。
高可配置性的好處顯而易見,比如在安防監控領域,室外的攝像頭成像經常會受到光線、天氣和物體移動速度等因素的影響。借助 Mali-C55 增強的色調映射和降噪能力,人臉和物體識別就會更加精確,并且在車輛以時速 120.7 公里的速度行駛的情況下,也能做到比較準確的車牌識別。
在智能家居領域,可視門鈴經常是電池供電,所以對能耗的要求特別高,Mali-C55 的低面積、低能耗特性,使智能可視門鈴產品更耐用,并且能夠更準確地根據人臉識別的結果進行開鎖。
“Arm 作為智能攝像頭領域的領先 IP 提供商,我們的Cortex-A 系列CPU 基本上占據了較大的市場份額。未來智能攝像頭除了包含基本的CPU 之外,也會更多地使用ISP 和ML 加速器,通常我們的一些NPU 或者通用GPU、ISP 等IP 都會逐漸地在現有或者下一代芯片中得到應用,用于從圖像中提取更多有用的信息。對于實現高效的系統設計而言,擁有可針對此類活動所需要的數據類型和處理進行匹配的ISP是非常重要的。”Chloe Ma說道。
總之,隨著智能攝像頭的應用更加廣泛,行業朝著更高分辨率和更復雜的圖像處理方向發展,ISP 的性能也成為支持更高計算工作負載的非常關鍵的組件。Mali-C55 正是為了滿足這些趨勢的要求所設計的。
去年10月Arm物聯網全面解決方案 (Arm Total Solutions for IoT)發布,今年4月底更新。這將是Arm面向客戶應用,簡化芯片開發,加速IoT產品設計的主要產品上市途徑。后續每個推出的解決方案,都會包括Arm Corstone 子系統的參考設計,Arm 虛擬硬件和諸如Project Cassini 和Project Centauri 的生態計劃和軟件實現。據介紹,最新的Mali-C55 也不例外,未來推出的智能視覺全面解決方案,將包括這款最新的Mali-C55 ISP,使機器視覺更加敏銳。
Arm在物聯網領域看到的機會
在物聯網領域,Arm將以全面解決方案 (Total Solutions for IoT) 的產品方式協助客戶因應市場需求。Chloe Ma表示,在中國的物聯網領域,應用都處在世界領先水平,比如在智能視覺方面,由于中國人口密度非常大,所以在智能安防和監控方面對圖像處理的畫質和性能提出更高的要求。中國是一個制造業大國,智能制造等智能產業都受到大力的扶持,而智能制造需要在智能語音、智能視覺方面得到更多應用。同時,在零售領域,中國在智能化方面也處于非常領先的市場水平,如智能無人售貨柜、智能無人店,以及無接觸的智能購物。從 Arm的角度來看,我們會與中國本土用例進行創新的芯片和系統廠商、軟件廠商、算法廠商持續進行緊密合作,推出更適用于未來趨勢和中國本土用例、本土需求的更先進的產品。
具體到Arm在物聯網的策略有兩點:一是邊緣智能,未來物聯網市場的發展會從萬物互聯到萬物智連,智能包括智能視覺、智能聽覺等技術,這也是Arm的解決方案投資的焦點。二是,Arm希望能夠在比較通用的市場上,如MCU、NPU市場,推出更先進的產品,使這些通用市場得到性能提升,更好地支持AI、ML等工作負載。
-
ARM
+關注
關注
134文章
9046瀏覽量
366817 -
物聯網
+關注
關注
2903文章
44275瀏覽量
371266
發布評論請先 登錄
相關推薦
評論