發布日期:2022-07-15 點擊率:88
MIPI-CSI-2及FPD-Link-III相機接口
許多嵌入式機器視覺應用(尤其是多相機設置)需求的數據線長度超過MIPI CSI-2相機所能及的最大值(即20公分)。 藉由FPD-Link橋接器即可實現其數據線長達15米。圖像數據經由精巧(? 2.8 mm)的同軸電纜以高達4.16 Gbps速度傳輸,同時傳輸影像數據、控制指令及供電。
如此一來,其帶寬充裕,可以從5MP相機中,以每秒30張的幀速率傳輸圖像數據。 開發人員可以在MIPI-CSI-2和FPD-Link-III板機亦或具備防護IP67等級外殼的FPD-Link-III相機之間進行選擇。 此精巧相機提供黑白與彩色不同機種選擇,裝載Sony和ONSemi最新CMOS傳感器技術(全局和卷簾快門,分辨率范圍自0.3MP[VGA]至8.3 MP)。
無論應用需求為MIPI CSI-2亦或FPD Link接口、高分辨率或高幀速率,The Imaging Source皆能提供豐富廣泛的嵌入式視覺相機模塊以符合各類的需求。
為何選擇MIPI CSI2或FPD-Link III相機接口?
有些使用者可能想知道為何選擇MIPI CSI-2或FPD-Link-III相機,而非USB-3或GigE相機。 其原因在于嵌入式平臺本身的硬件功能特性,即硬件加速的圖像信號處理器(ISP)。 嵌入式平臺的MIPI-CSI-2接口可直接鏈接ISP,以避免延遲及數據轉換問題。 The Imaging Source MIPI-CSI-2相機經過專門設計,可將原始圖像數據直接傳輸至接口。 這類的嵌入式板載相機僅包括最必要的基本功能,因此特別具有成本經濟效益。 ISP能夠處理硬件加速的操作,如去馬賽克、色彩校正、色彩空間轉換、白平衡、鏡頭校正和圖像數據壓縮(如H.264/H.256)。
兩臺相機開發工具包,搭配NVIDIA Jetson Nano (MIPI CSI-2接口)并增配自動冷卻功能防止過熱降頻。
平臺為嵌入式視覺帶來AI優勢
除ISP外,上述NVIDIA嵌入式計算機(例如NVIDIA Jetson Nano, Xavier NX *及AGX Xavier *)提供了具有CUDA內核的GPU和多個MIPI-CSI-2相機接口,而造就它們完美地適用于AI和要求嚴苛的機器視覺應用。 NVIDIA平臺能夠并行運作多個神經網絡,以執行圖像分割、圖像分類和對象識別。 NVIDIA SDK "JetPack" 支持所有基于NVIDIA Jetson的嵌入式平臺。
載板附帶6個使用Jetson AGX Xavier的FPD Link III相機模塊。
NVIDIA提供廣泛的軟件庫,可進行深度學習以及圖像和視訊處理。 The Imaging Source提供相應的相機驅動程序能夠完美地集成至NVIDIA軟件框架中。而圖像數據能夠直接地傳輸至預訓練的深度學習模塊。
對于要求不高的圖像處理任務,具備MIPI-CSI-2相機接口與ISP的Raspberry Pi 4會是一個極佳的選擇。 相同地,MIPI-CSI-2接口也能夠直接地鏈接至ISP。例如,Raspberry Pi 4能夠壓縮高分辨率H.264圖像并經由以太網或WLAN發送。
Edge機器視覺
經濟高效的運作能力、升級的機器學習運算以及整體上減少系統占用空間,使邊緣計算和AI(尤其是深度學習)的發展得以融合。 深度學習為檢驗標準不易量化或定義的應用提供了機器視覺解決方案,為檢驗、裝配和質量保證應用提供新的可能性。
圖: 低成本的處理性能、深度學習技術的進步和高性能傳感器,使得基于邊緣的視覺應用得到越來越多采用。
NVIDIA優異的AI功能與The Imaging Source豐富且堅固可靠的工業相機產品結合,使嵌入式視覺開發人員能夠實現了以往無法或需要大量編程工作的應用程序。