le="display: block;">　　嵌入式視覺系統(tǒng)精巧的體積、符合經(jīng)濟(jì)效益的價格以及高度彈性的整合特性讓許多廠商紛紛投入研發(fā)設(shè)計的行列。 在許多方面，嵌入式視覺系統(tǒng)還只是剛開始被廣泛的使用于商業(yè)中，但仍然不會改變這一技術(shù)將為未來產(chǎn)業(yè)帶來巨大改變的潛力。嵌入式視覺系統(tǒng)高度的彈性也使得開發(fā)人員必須多方考慮，包括挑選適合的硬件界面、處理平臺等等，以下The Imaging Source 映美精相機(jī)分享嵌入式機(jī)器視覺相關(guān)應(yīng)用接口。

　　MIPI-CSI-2及FPD-Link-III相機(jī)接口

　　許多嵌入式機(jī)器視覺應(yīng)用(尤其是多相機(jī)設(shè)置)需求的數(shù)據(jù)線長度超過MIPI CSI-2相機(jī)所能及的最大值(即20公分)。 藉由FPD-Link橋接器即可實現(xiàn)其數(shù)據(jù)線長達(dá)15米。圖像數(shù)據(jù)經(jīng)由精巧(? 2.8 mm)的同軸電纜以高達(dá)4.16 Gbps速度傳輸，同時傳輸影像數(shù)據(jù)、控制指令及供電。

　　如此一來，其帶寬充裕，可以從5MP相機(jī)中，以每秒30張的幀速率傳輸圖像數(shù)據(jù)。 開發(fā)人員可以在MIPI-CSI-2和FPD-Link-III板機(jī)亦或具備防護(hù)IP67等級外殼的FPD-Link-III相機(jī)之間進(jìn)行選擇。 此精巧相機(jī)提供黑白與彩色不同機(jī)種選擇，裝載Sony和ONSemi最新CMOS傳感器技術(shù)(全局和卷簾快門，分辨率范圍自0.3MP[VGA]至8.3 MP)。

無論應(yīng)用需求為MIPI CSI-2亦或FPD Link接口、高分辨率或高幀速率，The Imaging Source皆能提供豐富廣泛的嵌入式視覺相機(jī)模塊以符合各類的需求。

　　為何選擇MIPI CSI2或FPD-Link III相機(jī)接口?

　　有些使用者可能想知道為何選擇MIPI CSI-2或FPD-Link-III相機(jī)，而非USB-3或GigE相機(jī)。 其原因在于嵌入式平臺本身的硬件功能特性，即硬件加速的圖像信號處理器(ISP)。 嵌入式平臺的MIPI-CSI-2接口可直接鏈接ISP，以避免延遲及數(shù)據(jù)轉(zhuǎn)換問題。 The Imaging Source MIPI-CSI-2相機(jī)經(jīng)過專門設(shè)計，可將原始圖像數(shù)據(jù)直接傳輸至接口。 這類的嵌入式板載相機(jī)僅包括最必要的基本功能，因此特別具有成本經(jīng)濟(jì)效益。 ISP能夠處理硬件加速的操作，如去馬賽克、色彩校正、色彩空間轉(zhuǎn)換、白平衡、鏡頭校正和圖像數(shù)據(jù)壓縮(如H.264/H.256)。

兩臺相機(jī)開發(fā)工具包，搭配NVIDIA Jetson Nano (MIPI CSI-2接口)并增配自動冷卻功能防止過熱降頻。

　　平臺為嵌入式視覺帶來AI優(yōu)勢

　　除ISP外，上述NVIDIA嵌入式計算機(jī)(例如NVIDIA Jetson Nano, Xavier NX *及AGX Xavier *)提供了具有CUDA內(nèi)核的GPU和多個MIPI-CSI-2相機(jī)接口，而造就它們完美地適用于AI和要求嚴(yán)苛的機(jī)器視覺應(yīng)用。 NVIDIA平臺能夠并行運(yùn)作多個神經(jīng)網(wǎng)絡(luò)，以執(zhí)行圖像分割、圖像分類和對象識別。 NVIDIA SDK "JetPack" 支持所有基于NVIDIA Jetson的嵌入式平臺。

載板附帶6個使用Jetson AGX Xavier的FPD Link III相機(jī)模塊。

　　NVIDIA提供廣泛的軟件庫，可進(jìn)行深度學(xué)習(xí)以及圖像和視訊處理。 The Imaging Source提供相應(yīng)的相機(jī)驅(qū)動程序能夠完美地集成至NVIDIA軟件框架中。而圖像數(shù)據(jù)能夠直接地傳輸至預(yù)訓(xùn)練的深度學(xué)習(xí)模塊。

　　對于要求不高的圖像處理任務(wù)，具備MIPI-CSI-2相機(jī)接口與ISP的Raspberry Pi 4會是一個極佳的選擇。 相同地，MIPI-CSI-2接口也能夠直接地鏈接至ISP。例如，Raspberry Pi 4能夠壓縮高分辨率H.264圖像并經(jīng)由以太網(wǎng)或WLAN發(fā)送。

　　Edge機(jī)器視覺

　　經(jīng)濟(jì)高效的運(yùn)作能力、升級的機(jī)器學(xué)習(xí)運(yùn)算以及整體上減少系統(tǒng)占用空間，使邊緣計算和AI(尤其是深度學(xué)習(xí))的發(fā)展得以融合。 深度學(xué)習(xí)為檢驗標(biāo)準(zhǔn)不易量化或定義的應(yīng)用提供了機(jī)器視覺解決方案，為檢驗、裝配和質(zhì)量保證應(yīng)用提供新的可能性。

圖: 低成本的處理性能、深度學(xué)習(xí)技術(shù)的進(jìn)步和高性能傳感器，使得基于邊緣的視覺應(yīng)用得到越來越多采用。

　　NVIDIA優(yōu)異的AI功能與The Imaging Source豐富且堅固可靠的工業(yè)相機(jī)產(chǎn)品結(jié)合，使嵌入式視覺開發(fā)人員能夠?qū)崿F(xiàn)了以往無法或需要大量編程工作的應(yīng)用程序。