基于Nios II的視頻運動目標檢測跟蹤系統(tǒng)設計

　　摘要：文章是以Nios II處理器為中心的視頻運動目標檢測跟蹤系統(tǒng)，通過CMOS圖像傳感器采集視頻圖像信息，采用幀間差分法檢測運動目標，形心跟蹤算法對目標進行跟蹤，最后在VGA顯示器上顯示視頻中運動物體。實驗結果表明，該系統(tǒng)可達到運動目標檢測跟蹤的理想結果。

　　0 引言

　　運動目標檢測跟蹤就是將運動的目標從視頻圖像序列中檢測出來，對其進行跟蹤。在計算機視覺領域和智能視頻監(jiān)控系統(tǒng)中，目標檢測與跟蹤系統(tǒng)是一個最要的研究內(nèi)容，該系統(tǒng)在很多領域中經(jīng)得到廣泛的應用，例如在家庭住宅小區(qū)、智能交通、銀行、超市等場所都設有視頻監(jiān)控系統(tǒng)，起到了不需要人為的作用，就可以對采集來的視頻圖像信號進行處理，并對監(jiān)控系統(tǒng)進行控制。視頻監(jiān)控與監(jiān)視系統(tǒng)VSAM是由美國國防部研制出來的，其作用是對整個場景進行監(jiān)控，該系統(tǒng)可以自動地調(diào)多個圖像傳感器無縫接入，主要應用在戰(zhàn)爭、危險場合的監(jiān)控。馬里蘭大學研制出的W4實時監(jiān)控可以在夜晚或者光線較差的環(huán)境下對出現(xiàn)的人定位和分割，主要應用在智能交通、家居服務等。視頻運動目標檢測與跟蹤系統(tǒng)對檢測目標的準確性和實時性要求很高。SOPC是嵌入式微處理器可編程片上系統(tǒng)，可在FPGA芯片上實現(xiàn)。本文采用SOPC(在FPGA嵌入NiosII軟核)作為視頻處理核心器件的方案，與傳統(tǒng)的采用DSP和ARM芯片的方案相比，具有成本更低、設計更靈活，而且能達到軟硬件協(xié)同工作、處理速度更快、容易升級。系統(tǒng)采用Altera公司的CycloneII EP2C35F672C6作為核心處理芯片，NIOSII軟核處理器為核心對運動目標實時準確地檢測與跟蹤。

　　1 系統(tǒng)組成及框圖

　　本文是基于FPGA的視頻運動目標檢測跟蹤系統(tǒng)，主要分為四個模塊：圖像采集模塊、存儲模塊、目標檢測跟蹤模塊和VGA顯示模塊。

　　1.1 圖像采集模塊

　　圖像采集模塊的作用是接收CMOS圖像傳感器采集到的視頻圖像。本系統(tǒng)采用的是友晶公司提供的TRDB—D5M攝像頭開發(fā)套件，使用的是CMOS圖像傳感器，它是將光學圖像轉(zhuǎn)化成電子信號的有源像素傳感器，是利用CMOS半導體而制成的。TRDB—D5M作為一款攝像頭套件，有很多攝像方面的優(yōu)勢;高幀率、優(yōu)秀的低亮度性能、微弱的暗電流、全局復位解除(使所有像素點同時開始曝光)、可編程控制幀率、幀規(guī)模、曝光時間，片上鎖相環(huán)、自動黑面校準等。

　　1.2 存儲模塊

　　本設計在硬件系統(tǒng)中使用一片SDRAM作為圖片緩存的存儲器，在軟件系統(tǒng)中，備用一片SDRAM存儲幀圖片，使用一片SRAM存儲軟件代碼和軟件處理過程的中間數(shù)據(jù)。

　　1.3 目標檢測跟蹤模塊

　　系統(tǒng)中大部分模塊是由Verilog HDL設計的，使用硬件來完成實際的功能，此模塊是在基于NiosII IDE集成開發(fā)工具使用C語言實現(xiàn)的，我們在EP2C35中嵌入NIOS II軟核，控制連接在外部總線上的SDRAM和SRAM。在整個模塊中，F(xiàn)PGA是綜合了NIOS II處理器、SDRAM控制器、SRAM控制器、攝像頭等許多模塊的最主要的部分。

　　1.4 VGA顯示模塊

　　VGA輸出接口芯片采用的是美國AD公司的ADV7123，它是一款單芯片包含3路高速、10位輸入的視頻D/A轉(zhuǎn)換器、行場同步信號、行場消隱信號、時鐘信號。ADV7123對RGB視頻數(shù)字信號進行D/A變換成VGA需要的RGB模擬信號。最后將運動目標檢測跟蹤結果顯示到PC顯示器上。運動目標檢測跟蹤系統(tǒng)的總體框圖如圖1所示。

　　運動目標檢測是目標跟蹤的前提，其作用就是當視頻圖像序列中有運動目標出現(xiàn)，通過檢測算法將目標從背景圖像中提取出來。根據(jù)監(jiān)控場景是運動的還是固定的，可以分為背景是固定的運動目標檢測和背景是運動的運動目標檢測。本系統(tǒng)是對背景運動的運動目標檢測，目前，運動目標檢測主要有三種方法：背景差分法、光流法和幀間差分法。背景差分法和光流法與幀間差分法相比，具有精度高定位準的優(yōu)點，但算法的復雜性較高，難以在硬件平臺上實現(xiàn)實時處理，因此，本系統(tǒng)采用的是幀間差分法。

　　幀間差分法是對連續(xù)視頻序列圖像中相鄰兩幀作差，從而得到運動目標的方法。通常選取相鄰的兩幀或三幀圖像進行差分運算，設t時刻當前幀圖像為Fk(x，y)，t-1時刻的前一幀圖像為Fk-1(x，y)，兩幀進行相減運算如下：

　　其中，T為閾值，如果相鄰兩幀差分后的像素灰度值大于T，則二值化圖像Bk(x，y)像素點為1表示運動目標區(qū)域，若為0表示背景區(qū)域。幀間差分算法基本流程如圖2所示。

　　1.5 目標跟蹤

　　目標跟蹤有很多算法，本系統(tǒng)選用的是形心跟蹤法。形心就是運動目標的中心，對于準確定位出目標具有重要的意義。本文形心的獲取主要是通過幀間差分法檢測到運動目標后，對檢測到的所有動態(tài)點橫坐標和縱坐標進行統(tǒng)計，然后算出所有動態(tài)點橫坐標和縱坐標的中值，這個中值即為運動目標的中心。當運動目標較小時，若采用模板匹配法，由于所取模板與背景類似，目標特征不夠明顯，比較容易產(chǎn)生錯誤的匹配，因此，比較適合采用形心跟蹤法進行跟蹤和測量。二值化后的圖像，其形心坐標計算公式為：

　　形心跟蹤得到運動目標的坐標后，統(tǒng)計運動目標的像素點，再根據(jù)形心坐標將運動目標用矩形框跟蹤，進而得出運動物體軌跡，NiosII處理器作出相應的控制信號，驅(qū)動云臺進行跟蹤運動目標。

　　2 實驗結果

　　本論文是基于SOPC的視頻運動目標檢測跟蹤系統(tǒng)，使用Altera公司DE2多媒體開發(fā)板完成的。