基於大氣物理模型的快速視覺優化去霧演算法

才智咖 人氣:2.01W

摘要:針對霧霾天氣條件下單幅影象降質以及現有去霧方法時間複雜度高的問題,以環境光物理模型為基礎,引出快速視覺優化去霧演算法。首先對單幅影象閾值分割找到天空區域,並結合二元樹模型定位精確的天空光向量,進而採用改進的約束最小二乘法濾波細化粗略透射比率,保證其邊緣細節較完整且受噪聲影響小,最後利用環境光物理模型實現無霧影象的還原,並採用平均梯度、資訊熵和視覺保真度等指標對影象進行評價。實驗結果表明,所提演算法與基於多尺度Retinex的自適應影象增強方法、基於獨立分量的復原方法、快速視覺化復原方法和暗原色先驗復原方法對比,指標值較好且實時性強。

基於大氣物理模型的快速視覺優化去霧演算法

關鍵詞:暗通道先驗;二元樹;最小二乘法濾波;閾值分割

引言

現有的去霧演算法可分為兩個方向:一是基於影象增強的演算法改進,通過提高影象的對比度,從人眼感官的角度優化視覺效果;二是基於影象復原的演算法改進,針對環境光物理模型,採用病態方程和影象處理的基本方法還原未知量。

去霧演算法基於人眼視覺。增強類去霧演算法通過強化和削弱某些資訊達成此目的。早期的該類去霧演算法如全域性直方圖均衡化[1],對影象整體作均衡處理,但忽視了局部景深變化帶來的“暈輪效應”。對此Kim等[2]用子塊部分重疊直方圖均衡化和Zimmerman等[3]插值直方圖均衡化方法解決了由“塊效應”引起的運算複雜度高的問題。此外,Russo[4]通過多個小波尺度上的增強策略實現影象細節區域較為精細的處理。劉茜等[5]提出的多尺度Retinex去霧自適應演算法(MultiScale Retinex, MSR)對細節處理,其影象壓縮效果明顯; 但其濃霧處理顏色失真明顯,同時拉大了光暈和噪聲,因而該演算法適用於薄霧處理。

基於環境光物理模型的去霧演算法對數學模型逆推病態方程,所得的去霧影象效果與現實場景相近,其細節真實細膩。Kratz等[6]基於Fattal[7]提出將單幅影象作為階乘馬爾可夫隨機場的假設,其中場景反照率和景深是兩個獨立的統計量。此方法採用典型的期望最大化演算法來實現因式分解,恢復出的無霧影象具有精細的邊緣細節; 但其輸出影象被過度增強。Yu等[8]提出一種快速去霧方法,採用快速雙邊濾波器實現天空光向量A的平滑; 由於中值濾波處理的速度明顯優於雙邊濾波,因此該方法比採用中值濾波處理的演算法[9]要慢。He等[10]通過觀察大量無霧影象,提出暗通道先驗理論,即無霧影象中至少有一個顏色通道的畫素值很低的結論; 但此理論在戶外拍攝的影象中,場景與天空亮度相近時不成立。

本文演算法屬於環境光物理模型的去霧處理,對天空光向量A採用閾值分割並結合二元樹模型實現較為精確的求取。並對初始透射比率t(x,y)採用改進的最小二乘法濾波優化,其抑制噪聲的同時能最大限度地保留邊緣細節。通過檢測平均梯度、資訊熵以及視覺資訊保真度三種引數,可得本文演算法具有良好的人眼視覺效果,以及較強的魯棒性的結論。

一、霧霾成像的環境光物理模型

由Narasimhan等[11]引出的環境光傳輸的物理模型被廣泛應用於機器視覺和計算機圖形處理領域,其表述式如下:

F(x,y)=R(x,y)e-βd(x,y)+A(1-e-βd(x,y))(1)

其中:F(x,y)代表霧氣影象在(x,y)的畫素強度值; R(x,y)表示無霧影象在(x,y)處的畫素強度值; t(x,y)=e-βd(x,y)為介質傳輸的透射比率,β為環境光的散射係數,d(x,y)為景深,此等式表明場景中的光線強度與景深成指數性衰減的關係;A為天空光向量;R(x,y)e-βd(x,y)代表直接衰減項,表示在場景中的輻射和介質中衰減掉的部分。

從圖形學的角度,霧氣影象模型的等式表明在RGB三通道中,天空光向量A、F(x,y)、R(x,y)之間存在幾何關係。透射比率t(x,y)為兩條線段的比值。

t(x,y)=‖A-F(x,y)‖‖A-R(x,y)‖=AC-F(x,y)AC-R(x,y);

C∈[R,G,B](2

利用環境光物理模型實現去霧處理,實質為根據霧氣影象F(x,y)估計天空光向量A、透射比率t(x,y)和無霧圖R(x,y)。對於一幅具有n個畫素點的彩色影象F(x,y),存在3n個約束量和4n+3個未知參量。對未知參量的還原需要大量的假定和前驗資訊,引言所述的文獻[8-9]等去霧演算法均在環境光物理模型下,通過自身演算法的假定和前驗資訊得到A、t(x,y)和R(x,y)。本文演算法在He演算法[10]前驗資訊的基礎上優化參量求取方法,使得還原影象效果更接近真實值。

圖片

圖1環境光散射模型

二、本文演算法的整體設計

天空光向量A是還原無霧影象的重要參量,大多數基於環境光模型的去霧演算法對A值的處理不夠精準。若取整幅影象的最大畫素值,一些白色或偏白色的背景目標被誤取為A值。本文采用閾值分割結合二元樹模型選取A值,首先利用閾值分割搜尋天空區域,定位A值區間。再採用二元樹模型對所得的天空區域分塊,求取塊的平均畫素值,比較求取得到的平均值大小,並取畫素值大的塊分塊比較,重複上述步驟至塊中的畫素點數量小於給定的閾值T。在鎖定塊的畫素點群中定位A值。進而採用改進的最小二乘法濾波[12]對初始投射圖t(x,y)優化,該演算法延續了最小二乘法濾波保持邊緣能力強的優勢同時其去噪能力強。

本文演算法主要步驟如下所示:

1)對霧氣影象進行閾值分割得到天空分割槽s1;

2)對天空區域s1採用二元樹模型分割並求取灰度均值最大值所在區域;

3)重複2)至區域s2的畫素個數小於給定的閾值T;

4)將s2的每個畫素值與255對比,所得最接近的畫素值即為A值;

5)應用暗通道先驗模型確定暗通道圖和初始投射圖;

6)應用改進的最小二乘法濾波優化透射圖[12];

7)根據公式R(x,y)=F(x,y)-Amax(t1(x,y),t0)+A還原去霧影象。

三、本文演算法的具體實現

3.1閾值分割分割槽

將目標和背景分開是閾值分割的目標,本文采用閾值分割的目的是將天空與其他景物相分離。閾值分割演算法中閾值選取往往佔用大量處理時間,例如大津法OTSU[13](由Nobuyuki OTSU提出的最大類間方差法)其選取閾值方式為: