Arm 今日宣布針對車規需求推出 Arm Mali-C78AE 影像訊號處理器 IP ,除了具備先進輔助系統與人類視覺等新一代應用所需的高性能以外,更針對車用的環境具備功能性安全需求,旨在配合 Mali-A78AE CPU 、 Mali-G78AE GPU 構成完善且可靠的車用 IP 組合。
而先進輔助駕駛與自動駕駛技術大廠 Mobileye 亦率先宣布成為首家授權使用 Mali-C78AE 的客戶,並將搭配 Mali-G78AE 用於次世代 EyeQ 平台 Mobileye EyeQ Ultra 、 EyeQ6H 等。
▲ Mali-C78AE 借助調節影像曝光與對比與先進降噪,使輸入的影像更為清晰
Mali-C78AE 是為包括人類與機器視覺安全應用所設計的訊號處理器 IP ,能夠處理 4 具即時攝影機或 16 具虛擬攝影機訊號,同時預先整合硬體安全機制與軟體診斷機制,能符合 ISO 26262 ASIL B 功能性安全需求,可預防或檢測單一影像圖框中可能造成圖框數據處理錯誤的故障,借助具備超過 380 個故障檢測線路、持續自我檢測,能夠盡速偵測出連線攝影機中感應器與硬體故障。
同時,針對自動駕駛與先進輔助的機器視覺,將訊號從感測器傳遞自具備 CPU 與 GPU 等的 SoC 到完成車內螢幕顯示,需在 150ms 的時間內完成,若超過 150ms ,就可能在像是使用停車輔助等情境產生影像延遲;此外在機器視覺的應用中,影像感測器擷取影像到傳送至決策處理器時,車輛移動距離不應多於 250mm ,一旦超出 250mm 則象徵機器視覺系統反應過慢,無法滿足精確性與即時性的要求。
也為了這些需求, Mali-C78AE 借助先進降噪與動態範圍管理,能夠對輸入影像訊號的每一幀調節過亮與過暗的區域,並進一步減少影像中的噪點,使輸入決策處理器的訊號更為清晰,加速決策的判斷與分析;同時 Mali-C78AE 能處理四路高解析、高幀率的即時攝影機數據,能降低記憶體、通訊與處理需求,進一步提升效率。
並且 Mali-C78AE 能夠降低實作多個 ADAS 成本,借助縮小針對機器視覺處理過的感測器輸出與色彩轉譯,使攝影機感測器能同時輸出適合決策處理器處理的環景訊號與人類能判讀的影像,能避免攝影機與相關電子設備與配線重複,進一步降低成本並提供完善的功能。