模糊圖像處理技術在安防領域的應用
1、模糊圖像產(chǎn)生的原因分析
圖像的呈現(xiàn)是整個系統(tǒng)合作的結果,一個完整的視頻監(jiān)控系統(tǒng),是一個非常龐大而且復雜的系統(tǒng),從前端到后端各個環(huán)節(jié)都可能會導致視頻圖像信號損失進而使圖像變模糊。具體可以從以下這么幾個方面來分析。
1.1 系統(tǒng)自身因素
一個完整的視頻監(jiān)控系統(tǒng)從前到后由這么幾部分組成。在全模擬監(jiān)控系統(tǒng)中,從前端到后端由圖像采集、圖像傳輸、圖像存儲、圖像顯示等幾個環(huán)節(jié)構成。在每一個環(huán)節(jié)都會產(chǎn)生視頻信息損失,也就是讓圖像質(zhì)量變差或者變模糊。
從前端鏡頭、攝像機、視頻BNC接頭、傳輸線纜、監(jiān)視器圖像呈現(xiàn)等幾個環(huán)節(jié),每個環(huán)節(jié)都會引起圖像模糊。鏡頭,影響進入攝像機的光線和成像的精確性,會直接導致圖像模糊。攝像機內(nèi)的感光Sensor,影響光信號的采集和光電轉(zhuǎn)換效果,會直接導致圖像模糊。視頻傳輸電纜兩端的BNC接頭,因信號屏蔽的縫隙會造成信號損失,視頻傳輸電纜經(jīng)過長距離的傳輸,傳輸線纜的電阻、屏蔽、阻抗匹配等問題,都會引起信號的衰減,直接導致圖像質(zhì)量變差變模糊,監(jiān)視器圖像呈現(xiàn)端也有一定的信號損失。所以在整個監(jiān)控系統(tǒng)中的每一個節(jié)點和環(huán)節(jié),都有可能會導致圖像模糊。
在一個全數(shù)字視頻監(jiān)控系統(tǒng)中,采用網(wǎng)絡傳輸,傳輸線路上的視頻信號經(jīng)過數(shù)字化編碼,數(shù)字信號的傳輸和存儲可以有效避免因信號衰減造成圖像損傷。但是,在鏡頭、圖像采集以及后端呈現(xiàn)時的圖像信號耗損仍然無法避免。另外,在數(shù)字視頻監(jiān)控系統(tǒng)中,又增加了視頻信號的A/D轉(zhuǎn)換、視頻編碼壓縮環(huán)節(jié),這些環(huán)節(jié)也會導致的信息的直接損失?,F(xiàn)有的視頻壓縮編碼算法都是有損壓縮,會直接導致視頻信息的丟失,影響視頻清晰度。
1.2 自然環(huán)境
除系統(tǒng)本身的因素以外,自然環(huán)境對視頻圖像清晰度影響也非常大。若遇到刮風、下雨、下雪、大霧等自然天氣,都會導致圖像質(zhì)量急劇下降或模糊不清。
除此以外,還有照度不足、背光、逆光、溫度過低或過高等,都會對圖像還原系統(tǒng)造成影響,影響圖像清晰度。在光線不足的條件下,攝像機的Sensor成像會產(chǎn)生很多噪聲,這些噪聲會影響圖像清晰度,而且會使圖像編碼的碼流大幅增加。
1.3 人為環(huán)境
供電系統(tǒng)的電源不“干凈”,即竄入比較強的干擾信號,具體是指在50Hz的正弦波上疊加有干擾信號。如果本電網(wǎng)中有大功率可控硅調(diào)頻調(diào)速裝置、可控硅整流裝置、可控硅交直流變換裝置等,都會對電源產(chǎn)生污染。
電視監(jiān)控系統(tǒng)附近有很強的電磁干擾源或電磁輻射。電磁干擾源,如電焊、無線電發(fā)射、大電機、大繼電器的干擾等,也會導致視頻信號干擾。電磁干擾會導致圖像有間距相等的豎條或圖像呈規(guī)律性閃爍條文等,從而導致圖像模糊。
還有就是人為破壞導致,比如被弄得難以識別的車牌等,致使攝像機無法攝取車牌號等。
2、模糊圖像處理技術的發(fā)展
從20世紀90年代以來,安防行業(yè)經(jīng)歷了一個飛速發(fā)展的時期。隨著安防監(jiān)控系統(tǒng)從全模擬到全數(shù)字的發(fā)展,人們對圖像質(zhì)量要求越來越高,圖像分辨率也經(jīng)歷了從CIF到標清再到高清分辨率的變遷。
早期傳統(tǒng)的監(jiān)控系統(tǒng)采用模擬信號傳輸方式,稱為第一代全模擬監(jiān)控時代。模擬監(jiān)控主導安防市場十幾年時間,那時的視頻文件通過磁帶錄像機進行錄像和保存。在模擬監(jiān)控時代,因為視頻圖像的存儲都是采用模擬設備,模擬存儲設備隨著時間延長,圖像會有一定的信息損失。但是模糊圖像處理技術是針對數(shù)字圖像進行處理的技術,所以那個年代還沒有被引入到安防領域。
因模擬監(jiān)控系統(tǒng)固有的缺陷,隨著計算機技術的不斷發(fā)展,數(shù)字化存儲方式逐漸取代了模擬的磁帶存儲。隨之進入了第二代準數(shù)字監(jiān)控系統(tǒng),以數(shù)字硬盤錄像DVR為主,替代了模擬錄像機,跨出數(shù)字監(jiān)控的第一步。對視頻圖像數(shù)字化以后,圖像處理技術開始派上了用場,模糊圖像處理技術逐步被引入安防領域。
隨著計算機與網(wǎng)絡技術的發(fā)展,目前視頻監(jiān)控已經(jīng)發(fā)展到了基于IP網(wǎng)絡傳輸?shù)娜珨?shù)字監(jiān)控時代。這樣就進入了第三代全數(shù)字網(wǎng)絡視頻監(jiān)控時代,這個時代的代表產(chǎn)品以IPC、NVR為主。視頻圖像數(shù)字化以后,模糊圖像處理技術在安防領域得到廣泛的應用。
模糊圖像處理技術屬于圖像處理技術的一種,所謂圖像處理技術,就是利用計算機或高速、大規(guī)模的集成數(shù)字硬件,對從圖像信息中的數(shù)字電信號進行某些數(shù)字運算或處理,以期提高圖像的質(zhì)量或達到人們所預期的結果,因此也稱為計算機圖像處理技術。如對被噪聲污染的圖像除去噪聲,對信息微弱的圖像進行增強處理,對失真的圖像進行幾何校正,從犯罪現(xiàn)場提供指紋特征等。過去幾年,受國際恐怖事件的推動,人們的安全防范意識越來越高,社會對安保的需求也越來越多,監(jiān)控圖像處理技術也將在這樣的市場需求和規(guī)律中不斷演進,發(fā)揮越來越多的作用。
3、安防行業(yè)的特殊要求
計算機圖像處理是將圖像信號轉(zhuǎn)換成數(shù)字信號并利用計算機對其進行處理。由于計算機的處理速度極快,且數(shù)字信號具有失真小、易保存、易傳輸、抗干擾能力強等特點,因而計算機圖像處理的應用十分廣泛,包括航空航天、遙測技術、醫(yī)療器械、工業(yè)自動化檢測、安全識別、安防監(jiān)控、娛樂媒體等各大領域。每一個應用領域都有其領域的特殊性要求,安防監(jiān)控行業(yè)應用也有其固有的特殊性。
對圖像清晰度要求較高。在治安監(jiān)控現(xiàn)場,公安機關往往需要通過監(jiān)控錄像來辨認嫌疑人、證據(jù)等。一般清晰度不高的視頻都達不到這種要求。在交通監(jiān)控現(xiàn)場,交警需要通過監(jiān)控圖像來識別車牌、違章行為、駕駛?cè)说纫螅:膱D像在這種場合根本無法應用。
不同的行業(yè)監(jiān)控,對圖像要求的差異性。比如醫(yī)療監(jiān)控,對圖像的色彩還原性要求比較高。智能交通監(jiān)控,對攝像機夜間照度和抓拍速度要求比較高,要求能清晰辨別車牌。在無人值守監(jiān)控,需要設備在無人看管的條件下能長期穩(wěn)定的工作。
戶外安裝,無人看守。在安防領域,大多情況設備需要安裝在室外,設備需要經(jīng)受常年的風吹日曬。要經(jīng)歷常年溫度、濕度、鹽度、輻射等自然條件的影響。電子設備自身的老化的速度會比其他領域要相對快一些。攝像機鏡頭、電子設備、傳輸線路等設施的老化會導致圖像越來越模糊。
海量視頻路數(shù)的要求。在大型平安城市監(jiān)控項目中,視頻路數(shù)會達到上萬路,甚至更多路。如此海量的視頻路數(shù),對網(wǎng)絡帶寬、存儲設備都提出了很高的要求。所以在視頻監(jiān)控領域都期望視頻編碼的碼率壓縮比達到最高,從而降低對帶寬和容量的要求。這就導致在視頻編碼環(huán)節(jié)產(chǎn)生更多的信息丟失,從而導致圖像模糊。
安防領域的這些特殊應用場所,都會導致圖像清晰度的下降,反過來又對圖像清晰度有很高的要求,勢必會導致模糊圖像處理技術在這里有廣闊的應用前景。
4、模糊圖像處理技術的局限性
目前受硬件水平、傳輸帶寬以及應用環(huán)境等因素影響,圖像模糊問題還無法得到徹底解決。
圖像從采集到傳輸?shù)酱鎯︼@示的任何一個環(huán)節(jié)對于圖像質(zhì)量都很關鍵,任何一個步驟出問題都會影響圖像質(zhì)量,而且這種影響是不可逆的,所以說徹底解決圖像模糊問題,需要一個全方位的技術更新。比如,在當前的數(shù)字圖像技術的背景下,編碼技術是影響圖像質(zhì)量的瓶頸之一,如果出現(xiàn)一種壓縮比高、圖像損失小的編碼算法,當然會一定程度解決因為壓縮導致的圖像模糊問題,不過要實現(xiàn)這種算法,通常需要更高的運算代價,所以還需要硬件技術的更新來滿足這樣的算法。
類似超分辨重構的模糊圖像處理技術由于其算法的復雜性,目前的常規(guī)設備還很難做到實時處理高清圖像,所以算法的效率還是目前的模糊圖像處理的不足之一,這就需要從算法和硬件兩方面入手,提高算法效率,同時也需要提升硬件性能。
另外,目前各種針對模糊圖像處理的算法,都是基于某種特定場景應用而產(chǎn)生的解決方法,各種算法存在的局部性和局限性,造成了算法應用的障礙。所以在未來的很多年,我們關于圖像處理的算法和模型也有很長的路要走。
5、天地偉業(yè)的技術創(chuàng)新
天地偉業(yè)一直被譽為安防超市,其產(chǎn)品覆蓋安防領域的各種場所和行業(yè),擁有一整套完整的行業(yè)解決方案。我們的產(chǎn)品除了盡量提供更合理的采集條件和采集環(huán)境之外,還在編碼和圖像處理上也做了很多工作。我們在圖像處理上采用了從前端到后端綜合優(yōu)化的多種處理方案。
5.1 動態(tài)編碼參數(shù)調(diào)節(jié)
我們的產(chǎn)品會根據(jù)網(wǎng)絡帶寬情況,動態(tài)調(diào)整壓縮編碼方案,在帶寬條件好的時候傳輸高分辨率或低壓縮比畫質(zhì)較高的圖像,在帶寬條件較差的時候,選擇壓縮比高或低分辨率的圖像,盡量充分利用帶寬。在帶寬條件較差的情況下根據(jù)行業(yè)特殊需求也會動態(tài)降低視頻幀率,來提高圖像質(zhì)量。
5.2 動態(tài)場景自適應
我們還根據(jù)具體的應用場景進行視頻采集參數(shù)的調(diào)節(jié),比如自動亮度、動態(tài)對比度、色彩補償?shù)燃夹g。并應用各種頻域的濾波技術,增強圖像紋理和去除各種噪聲;對于某些特殊應用場景,我們會采用超分辨重構技術來提高某些幀的清晰度,獲取關鍵信息。
動態(tài)對比度的視線原理主要是根據(jù)圖像的統(tǒng)計信息,分析圖像的亮度值分布情況,自動分析主要的圖像信息可能的分布范圍,把該亮度范圍進行拉伸,提高該范圍的對比度,同時適當調(diào)整亮度,使之更符合人眼的感受范圍。
實現(xiàn)過程主要是通過對圖像的直方圖統(tǒng)計分析圖像的亮度范圍,對低亮度的圖像適當拉伸低亮度范圍的對比度,并適當調(diào)高亮度范圍。對于高亮度的圖像拉伸高亮度范圍的對比度,降低亮度。這種方法對于低照度導致的圖像模糊有較好的校正效果,效果圖見5-1。
圖5-1 動態(tài)對比度調(diào)整前后效果圖
5.3 智能銳化
銳度增強的原理主要是在把圖像分成三個頻帶:低頻,中頻,高頻。低頻分量主要對應圖像中較大的物體的輪廓,中頻分量對應一般的輪廓和紋理,高頻分量對應圖像中的細節(jié)信息。分別提取圖像中三個頻段的信息,根據(jù)需求對三個頻段的信息乘上一個增益系數(shù),再疊加到原始圖像上,達到銳度增強的效果。
實現(xiàn)過程主要是通過設置三個對應不同頻段的高通濾波器,通過卷積原始圖像提取三個不同頻帶的信息,將提取的信息乘上增益系數(shù),疊加到原始圖像。這種方法對于壓縮編碼損失導致的模糊有一定效果。
天地偉業(yè)把銳度增強和智能分析結合在一起,比如只對圖像中運動變化的部分也就是監(jiān)控感興趣的部分圖像進行銳度增強,而對其他相對靜止的部分,不容易產(chǎn)生模糊的部分不做處理,這樣既可以提高處理速度,也可以有效解決圖像模糊問題。
圖5.2 智能銳化前后效果對比圖
6、發(fā)展趨勢及展望
從廣義上說,獲取不到足夠信息的圖像都可以叫做模糊圖像,所以圖像模糊問題會隨著人們需求的提升而有新的表現(xiàn)。比如目前的監(jiān)控領域也許只需要一副有一定分辨率的圖像能滿足人臉識別的需求即可,隨著社會的發(fā)展也許我們需要通過一段視頻來分析某人的嘴部動作,從而分析他在說什么,這樣的話我們會需要更高分辨率更清晰的圖像。這將是我們的一個永恒不變的追求方向,所以模糊圖像處理的問題將會被一直研究下去。
視頻監(jiān)控作為物聯(lián)網(wǎng)的一部分,隨著物聯(lián)網(wǎng)的不斷發(fā)展和應用,最終將會朝著智能化的方向發(fā)展,圖像模糊的自動分析即成為系統(tǒng)自檢應用的技術之一,通過智能分析,系統(tǒng)將會自動識別圖像的幾何形狀、色彩、噪聲、模糊、融合以及超分辨等圖像效果進行自動分析即處理。隨著模糊圖像處理技術的應用范圍越來越廣泛,模糊圖像處理技術和智能分析的完美結合必然成為發(fā)展趨勢。
評論