圖像處理仍然是高級駕駛員監控系統的主要障礙。為了應對這一挑戰，Arm 最新的圖像信號處理器簡化了 ADAS 和自動化技術的采用。

今天的車輛與十年前的車輛之間最顯著的區別之一是ADAS的突然普及。 

不同 ADAS 技術的概述。圖片由大陸工程服務公司提供

今天幾乎所有的新車都配備了傳感器和攝像頭，以確保駕駛對用戶來說盡可能簡單和安全。

為了支持這些 ADAS 系統，需要大量的計算資源。ADAS 系統中最流行的計算資源之一是ISP。

今天，Arm 宣布了一款專為 ADAS 和自動化應用設計的新 ISP，我們將對此進行討論，以及 ISP 在 ADAS 系統中的作用。

ADAS 中對 ISP 的需求

駕駛是一項視覺任務，因此，攝像頭可以說是啟用 ADAS 的最關鍵的傳感器。

在當今的 ADAS 系統中，可以找到用于各種用途的攝像頭，例如： 

• 環視系統
  

• 駕駛員監控系統

• 物體檢測/碰撞避免系統

在這個硬件的背后，ADAS 依靠一系列圖像處理和機器學習技術，例如計算機視覺和物體檢測來解釋這些圖像中發生了什么以及如何做出響應。 

ADAS 概述，通常依賴于視覺輸入。圖片由Synopsys提供

在硬件中實現這一點并非易事。ADAS 系統需要極低的延遲計算，特別是因為駕駛需要實時決策，而且通常是生死攸關的場景。 

這一要求意味著 ADAS 系統必須在幾毫秒內根據攝像頭輸入進行獲取、預處理、處理并做出決策。實現這一目標是一項具有挑戰性的任務，因為相機具有非常高的吞吐量，會產生大量數據。

為了解決這個問題，設計人員必須使用專門的計算硬件，例如 ISP。 

一般來說，ISP 旨在加速基于圖像的系統所需的數據處理和計算，從而實現低功耗和更快的性能處理。

為了應對這些 ADAS 設計挑戰，Arm 推出了用于 ADAS 的最新 ISP：Mali-C78AE。

新的 ISP 采用與 Mali-C71AE 相同的技術，專為數據處理而設計。 

Arm 聲稱它可以同時接受來自 16 個虛擬攝像頭的多達四個實時攝像頭的輸入，該設備支持高達 1.2 千兆像素/秒的吞吐量。它希望這種高吞吐量、多輸入能力將顯著降低系統設計的復雜性，從而使系統整體更高效。

在內部，ISP 集成了多個圖像處理模塊，包括降噪和缺陷像素校正，其中包括： 

• 色度降噪
  

• 紫邊校正

• 空間降噪

• 局部色調映射函數 

ISP 還提供動態范圍管理，具有 24 位動態范圍處理單元。 

Arm 表示，新的 ISP 總共內置了 280 多個故障檢測電路。

Mali-C78AE 的功能圖。圖片由 Arm提供

從系統層面來看，該設備旨在與其他 Arm 產品相結合，例如 Cortex-A78AE 和 Mali-G78AE。 

據 Arm 稱，這三個單元的組合可以提供針對性能和安全性進行優化的完整 ADAS 視覺管道。到目前為止，該設備本身已獲得 ASIL-B 汽車安全等級。

總而言之，Arm 希望為其 ADAS 產品創造進化的下一步。 

ADAS 的下一步

隨著 ADAS 繼續集成到當今幾乎所有的新車中，ISP 將繼續成為必需品。 

借助 Mali-C78AE，Arm 希望為行業提供改進的解決方案，提高整體系統的安全性和性能。