基于FPGA的視頻圖像處理系統的設計

【摘要】通過研究視頻圖像處理和視頻圖像幀格式以及FIF0緩存技術，提出了基于FPGA的視頻圖像處理系統設計。該設計運用幀間差分法、同步FIF0緩存設計，有效避免了圖像處理系統設計中亞穩態和異步信號處理等時序性難題，實現了視頻圖像序列的動態目標檢測系統設計。chipscope在線邏輯分析結果表明，所設計的系統具有實時的視頻圖像處理性能，與基于外接存儲器緩存的系統設計相比較，穩定性更高，實時性更好，功耗更低。

近年來，基于FPGA硬件技術的視頻圖像處理系統被廣泛地應用于視頻智能監控、智能交通系統、視頻采集、跟蹤系統等。作為機器視覺的一個重要研究方向，動態目標檢測在視頻智能監控、智能交通系統等方面得到了越來越多的應用。動態目標檢測是視頻智能化系統的前提，其目的是從視頻圖像序列中將變化區域提取出來。對變化區域的有效提取對后續的目標分類、跟蹤和行為理解等處理都非常重要。

視頻圖像處理系統設計中，視頻信號經過采集、緩存、處理、輸出(顯示或存儲)。而緩存模塊的設計取決于視頻圖像數據傳輸速率以及格式大小，根據困際電聯定義的ITU—RBT．656數字圖像接口標準，中國采用的是世界上大多數國家所采用的720×576分辨力的PAL制式視頻信號，每幀數據由場消隱信號、行控制信號、有效視頻數據組成，一幀圖像大小為3 240 kbit(灰度數據)。在基于FPGA技術的視頻和圖像處理系統設計中，利用FPGA可配置邏輯資源設計一幀圖像數據緩存單元的方法是行不通的，那么如何更好地利用FPGA芯片有限資源成為FPGA設計的難題。

本文基于Xilinx、Vritex-4芯片的動態目標檢測系統設計，合理利用芯片資源，以及根據系統動態檢測設計幀問差分法更有效地完成系統設計，達到動態檢測實時性的目的。

1 動態目標檢測系統架構

基于FPGA的動態目標檢測系統分為視頻采集模塊、視頻圖像緩存模塊、視頻數據檢測模塊。系統硬件平臺設計框架如圖1所示，FPGA芯片接收由CCD攝像機采集到模擬視頻信號經TVP5150解碼芯片轉換出來的數字視頻信號，FPGA視頻采集模塊檢測數字視頻流當中的有效視頻圖像信號，經圖像緩存模塊緩沖，一路傳輸給檢測模塊進行算法處理，經SAA7121編碼芯片轉換輸出LCD顯示，一路直接還原為視頻數據流信號，完善的系統顯示模塊還包括經ADV7123芯片轉換輸出到VGA顯示器對比，以達到動態目標檢測的可視化效果。此外，系統涉及到FPGA芯片與各個器件之間的硬件連接和通信協議，以及對FPGA內部的邏輯資源進行例化，包括MicroBlaze軟核、IIC總線模塊、DCM模塊等。

系統基于Xilinx Vritex-4芯片設計，其資源豐富，功能強大，內嵌1個32位的MicroBlaze軟核，集成了10 240個邏輯單元(slice)，128個DSP邏輯單元，4個數字時鐘管理模塊(DCM)。這些邏輯單元包含分布式RAM的容量高達160 kbit，塊RAM的容量高達2 304 kbit。這些為視頻流在FPGA認芯片內部實現延時提供了緩存空間。DSP邏輯單元為視頻數據流在片內進行運算和處理提供了計算能力上的支持。DcM模塊為內部例化器件提供系統時鐘信號。另外，DcM具有將信號差分、相移、倍頻、分頻等功能，這些都為系統外接器件提供了相應的時鐘信號，使整個系統具有良好的擴展性。

2 FIFO緩存與幀差法設計

動態目標檢測圖像數據緩存的難點在于數據容量大，速率與系統時鐘不一致，以及視頻圖像數據的連續性。視頻圖像處理是以一幀圖像數據進行算法處理為前提。經過解碼模數轉換后的720×576分辨力的一幀數字視頻圖像，包括色度信號Cb和Cr，以及亮度信號y。一幀圖像分奇數場和偶數場各288行，一行數據以色度信號C6、亮度信號l，和色度信號Cr按2：4：2組成，共1440個采樣點。其中的y數據流就是視頻圖像的灰度值數據流，也是人眼敏感的圖像數據，通常圖像處理的也是圖像灰度值。

由解碼芯片傳輸給FPGA芯片的視頻信號是頻率為27 MHz的亮度色度混合的數字信號VPIN。該系統利用VPIN_LLC分頻時鐘clk_675將亮度信號(灰度數據信號)單獨提取出來寫入FIFO做處理，但前提是要檢測這些信號是否為視頻有用信號。檢測方式有兩種，一種是通過解碼芯片產生的AVID指示信號檢測高低電平，從而判斷輸出數據是否為灰度數據或無效數據。AVID用來檢測指示VPIN有效視頻起始SAV信號和有效視頻結束EAV信號，圖2是通過在線邏輯分析儀Chipscope Pro得到的系統設計內部信號波形圖。由圖可知，AVID Stan跳變指向的是VPIN有效數據起始sAV信號FF，00，00，C7，同樣AVID Stop跳變指向的是EAV信號。另一種檢測方法是通過可綜合的VHDL程序代碼寫狀態機FSM，EAV信號。