本發(fā)明涉及一種圖像信號的處理方法，尤其是涉及一種立體圖像視覺舒適度增強(qiáng)方法。

背景技術(shù)：
隨著立體視頻顯示技術(shù)和高質(zhì)量立體視頻內(nèi)容獲取技術(shù)的快速發(fā)展，立體視頻的視覺體驗(yàn)質(zhì)量(QoE,QualityofExperience)是立體視頻系統(tǒng)設(shè)計(jì)中的一個重要問題，而視覺舒適度(VC,VisualComfort)是影響立體視頻的視覺體驗(yàn)質(zhì)量的重要因素。目前，對立體視頻/立體圖像的質(zhì)量評價研究主要考慮了內(nèi)容失真對于圖像質(zhì)量的影響，而很少考慮視覺舒適度等因素的影響。因此，為了提高觀看者的視覺體驗(yàn)質(zhì)量，研究立體視頻/立體圖像的視覺舒適度增強(qiáng)方法對3D內(nèi)容制作和后期處理具有十分重要的指導(dǎo)作用。與常規(guī)的平面圖像相比，觀看基于視差形成的立體圖像具有較強(qiáng)的立體感和沉浸感，但是長時間觀看立體圖像會出現(xiàn)頭疼、視覺疲勞、視力模糊甚至惡心等癥狀。過大的雙目視差、人眼焦點(diǎn)調(diào)節(jié)與輻輳機(jī)制沖突通常被認(rèn)為是引起視覺不舒適的主要原因。人眼的雙眼融合機(jī)制為具有水平視差的左、右眼物像融合成具有立體感的單一清晰物像提供了生理保證，然而如果水平視差過大，則會導(dǎo)致物像落在Panum融合區(qū)域外，人眼將無法正常形成雙眼單視性，長時間觀看容易造成嚴(yán)重的視覺疲勞；此外，不同于自然觀看條件下人眼焦點(diǎn)調(diào)節(jié)與輻輳機(jī)制的一致性(調(diào)節(jié)距離和輻輳距離都在觀看屏幕上)，在觀看立體圖像時，人眼焦點(diǎn)調(diào)節(jié)與輻輳機(jī)制會產(chǎn)生不同程度的沖突，同樣會影響觀看者的視覺體驗(yàn)質(zhì)量。通過一定的措施，可以將視覺不舒適降低到可以承受的范圍內(nèi)。目前主要通過線性或非線性的視差重映射方法來調(diào)整(增強(qiáng))立體圖像的視覺舒適度，但這類方法會改變立體圖像的視差范圍，特別是當(dāng)視差范圍擠壓過大時，會產(chǎn)生繪制重影。視差偏移是實(shí)現(xiàn)立體圖像視覺舒適度調(diào)整(增強(qiáng))的一種最簡單的方法，但如何有效地表征立體圖像視覺非舒適性區(qū)域、以及如何有效地對非舒適性進(jìn)行調(diào)節(jié)，都是在對立體圖像進(jìn)行視覺舒適度增強(qiáng)過程中需要研究解決的問題。

技術(shù)實(shí)現(xiàn)要素：
本發(fā)明所要解決的技術(shù)問題是提供一種立體圖像視覺舒適度增強(qiáng)方法，其能夠有效地提升觀看者的視覺體驗(yàn)和增強(qiáng)視覺舒適性。本發(fā)明解決上述技術(shù)問題所采用的技術(shù)方案為：一種立體圖像視覺舒適度增強(qiáng)方法，其特征在于包括以下步驟：①將待處理的立體圖像的左視點(diǎn)圖像、右視點(diǎn)圖像及左深度圖像對應(yīng)記為{IL(x,y)}、{IR(x,y)}及{DL(x,y)}，其中，(x,y)表示待處理的立體圖像中的像素點(diǎn)的坐標(biāo)位置，1≤x≤W，1≤y≤H，W和H對應(yīng)表示待處理的立體圖像的寬度和高度，IL(x,y)表示{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，IR(x,y)表示{IR(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，DL(x,y)表示{DL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值；②計(jì)算{IL(x,y)}的相位一致性圖，記為{f1(x,y)}，其中，f1(x,y)表示{f1(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，f1(x,y)亦表示{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的相位一致性特征；③計(jì)算{IL(x,y)}的左視差圖像，記為{dL(x,y)}，其中，dL(x,y)表示{dL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值；然后利用視差轉(zhuǎn)換算法計(jì)算{dL(x,y)}的角視差圖像，記為{φL(x,y)}，其中，φL(x,y)表示{φL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值；再計(jì)算{φL(x,y)}的視差響應(yīng)圖，記為{f2(x,y)}，其中，f2(x,y)表示{f2(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值；④將{IL(x,y)}分割成M個互不重疊的子塊；然后通過計(jì)算{IL(x,y)}中的每個子塊的特征對比度和空間緊密度，獲取{IL(x,y)}中的每個子塊的顯著值，將{IL(x,y)}中的第h個子塊的顯著值記為Sh；再將{IL(x,y)}中的每個子塊的顯著值作為該子塊中的所有像素點(diǎn)的顯著值，從而得到{IL(x,y)}的顯著圖，記為{f3(x,y)}；其中，M≥1，h的初始值為1，1≤h≤M，f3(x,y)表示{f3(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，f3(x,y)亦表示{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的顯著值；⑤對{f1(x,y)}、{f2(x,y)}及{f3(x,y)}進(jìn)行融合，得到{IL(x,y)}的視覺非舒適性圖，記為{F(x,y)}，將{F(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值記為F(x,y)，F(xiàn)(x,y)＝f1(x,y)×f2(x,y)×f3(x,y)；⑥計(jì)算{IL(x,y)}中的零視差平面所在的坐標(biāo)位置，記為xZDP，其中，表示取使得F(x,y)的值最大的坐標(biāo)值；⑦計(jì)算xZDP的匯聚平面值，記為然后計(jì)算{dL(x,y)}中的每個像素點(diǎn)經(jīng)調(diào)整后的像素值，將{dL(x,y)}中坐標(biāo)位置為x的像素點(diǎn)經(jīng)調(diào)整后的像素值記為d(x)，其中，f表示水平相機(jī)陣列中的各個相機(jī)的焦距，L表示待處理的立體圖像的左視點(diǎn)與右視點(diǎn)之間的水平基線距離，dZDP表示{IL(x,y)}中的零視差平面所在的坐標(biāo)位置xZDP的視差值，DL(xZDP)表示{DL(x,y)}中坐標(biāo)位置為xZDP的像素點(diǎn)的像素值，DL(x)表示{DL(x,y)}中坐標(biāo)位置為x的像素點(diǎn)的像素值，x∈Ω，Ω表示{DL(x,y)}中的所有像素點(diǎn)的坐標(biāo)位置的集合，Znear表示最小的場景深度值，Zfar表示最大的場景深度值；⑧計(jì)算經(jīng)調(diào)整后的右視點(diǎn)圖像，記為將中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值記為然后將{IL(x,y)}和構(gòu)成一幅新的立體圖像；其中，IL(x+d(x,y),y)表示{IL(x,y)}中坐標(biāo)位置為(x+d(x,y),y)的像素點(diǎn)的像素值，d(x,y)表示{dL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)經(jīng)調(diào)整后的像素值。所述的步驟②中的{f1(x,y)}的獲取過程為：②-1、對{IL(x,y)}進(jìn)行濾波處理，得到{IL(x,y)}中的每個像素點(diǎn)在不同尺度因子和不同方向因子下的偶對稱頻率響應(yīng)和奇對稱頻率響應(yīng)，將{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)在尺度因子為α和方向因子為θ下的偶對稱頻率響應(yīng)記為eα,θ(x,y)，將{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)在尺度因子為α和方向因子為θ下的奇對稱頻率響應(yīng)記為oα,θ(x,y)，其中，α表示濾波處理所采用的濾波器的尺度因子，1≤α≤4，θ表示濾波處理所采用的濾波器的方向因子，1≤θ≤4；②-2、根據(jù){IL(x,y)}中的每個像素點(diǎn)在不同尺度因子和不同方向因子下的偶對稱頻率響應(yīng)和奇對稱頻率響應(yīng)，計(jì)算{IL(x,y)}中的每個像素點(diǎn)的相位一致性特征，將{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的相位一致性特征記為f1(x,y)，其中，②-3、根據(jù){IL(x,y)}中的每個像素點(diǎn)的相位一致性特征，獲得{IL(x,y)}的相位一致性圖{f1(x,y)}，其中，{f1(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值為f1(x,y)。所述的步驟③中其中，f表示水平相機(jī)陣列中的各個相機(jī)的焦距，L表示待處理的立體圖像的左視點(diǎn)與右視點(diǎn)之間的水平基線距離，zc為待處理的立體圖像的匯聚平面值。所述的步驟③中其中，max()為取最大值函數(shù)。所述的步驟④中的子塊的尺寸大小為8×8，所述的步驟④中的Sh的具體過程為：④-1、將{IL(x,y)}從RGB顏色空間轉(zhuǎn)換到Y(jié)UV顏色空間，得到{IL(x,y)}的亮度分量圖、第一色度分量圖和第二色度分量圖，對應(yīng)記為{YL(x,y)}、{UL(x,y)}和{VL(x,y)}，其中，YL(x,y)表示{YL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，UL(x,y)表示{UL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，VL(x,y)表示{VL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值；④-2、對{YL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域進(jìn)行DCT變換，得到{YL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域的DCT系數(shù)矩陣，記為然后將中的DC系數(shù)構(gòu)成{IL(x,y)}中的第h個子塊的亮度特征向量，記為的維數(shù)為1；并將經(jīng)Z字形掃描后的前9個AC系數(shù)構(gòu)成{IL(x,y)}中的第h個子塊的紋理特征向量，記為的維數(shù)為9；其中，1≤u≤8,1≤v≤8，表示中坐標(biāo)位置為(u,v)的DCT系數(shù)；④-3、對{UL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域進(jìn)行DCT變換，得到{UL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域的DCT系數(shù)矩陣，記為并對{VL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域進(jìn)行DCT變換，得到{VL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域的DCT系數(shù)矩陣，記為然后將中的DC系數(shù)及中的DC系數(shù)構(gòu)成{IL(x,y)}中的第h個子塊的顏色特征向量，記為的維數(shù)為2；其中，表示中坐標(biāo)位置為(u,v)的DCT系數(shù)，表示中坐標(biāo)位置為(u,v)的DCT系數(shù)；④-4、對{DL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域進(jìn)行DCT變換，得到{DL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域的DCT系數(shù)矩陣，記為然后將中的DC系數(shù)構(gòu)成{IL(x,y)}中的第h個子塊的深度特征向量，記為的維數(shù)為1；其中，表示中坐標(biāo)位置為(u,v)的DCT系數(shù)；④-5、獲取{IL(x,y)}中的第h個子塊的通用特征向量，記為fh，其中，fh的維數(shù)為13，此處符號“[]”為矢量表示符號；④-6、計(jì)算{IL(x,y)}中的第h個子塊的特征對比度和空間緊密度，對應(yīng)記為FCh和SCh，其中，q為正整數(shù)，1≤q≤M，exp()表示以自然基數(shù)e為底的指數(shù)函數(shù)，符號“||||”為求歐式距離符號，fq表示{IL(x,y)}中的第q個子塊的通用特征向量，σp表示高斯函數(shù)的標(biāo)準(zhǔn)差，xh表示{IL(x,y)}中的第h個子塊中的中心像素點(diǎn)的坐標(biāo)位置，xq表示{IL(x,y)}中的第q個子塊中的中心像素點(diǎn)的坐標(biāo)位置，σc表示高斯函數(shù)的標(biāo)準(zhǔn)差，④-7、計(jì)算{IL(x,y)}中的第h個子塊的顯著值Sh，Sh＝FCh×SCh。與現(xiàn)有技術(shù)相比，本發(fā)明的優(yōu)點(diǎn)在于：1)本發(fā)明方法分別計(jì)算左視點(diǎn)圖像的相位一致性圖、左視點(diǎn)圖像的左視差圖像的角視差圖像的視差響應(yīng)圖、左視點(diǎn)圖像的顯著圖，然后融合得到左視點(diǎn)圖像的視覺非舒適性圖，得到的視覺非舒適性圖能夠較好地定量左視點(diǎn)圖像的局部非舒適性程度，從而能夠較為精確地檢測出左視點(diǎn)圖像的零視差平面。2)本發(fā)明方法將非舒適性程度最高的坐標(biāo)位置作為零視差平面，并將匯聚平面調(diào)整到零視差平面，得到每個像素點(diǎn)經(jīng)調(diào)整后的視差值，由于匯聚平面改變了立體圖像正視差與負(fù)視差的比重，因此有效地提升了觀看者的視覺體驗(yàn)和增強(qiáng)了視覺舒適性。附圖說明圖1為本發(fā)明方法的總體實(shí)現(xiàn)框圖；圖2a為“Balloons”的原始立體圖像的“紅/綠”圖；圖2b為“Balloons”的左視點(diǎn)圖像的相位一致性圖；圖2c為“Balloons”的左視點(diǎn)圖像的左視差圖像的角視差圖像的視差響應(yīng)圖；圖2d為“Balloons”的左視點(diǎn)圖像的顯著圖；圖2e為“Balloons”的左視點(diǎn)圖像的視覺非舒適性圖；圖2f為“Balloons”的經(jīng)調(diào)整后立體圖像的“紅/綠”圖；圖3a為“Kendo”的原始立體圖像的“紅/綠”圖；圖3b為“Kendo”的左視點(diǎn)圖像的相位一致性圖；圖3c為“Kendo”的左視點(diǎn)圖像的左視差圖像的角視差圖像的視差響應(yīng)圖；圖3d為“Kendo”的左視點(diǎn)圖像的顯著圖；圖3e為“Kendo”的左視點(diǎn)圖像的視覺非舒適性圖；圖3f為“Kendo”的經(jīng)調(diào)整后立體圖像的“紅/綠”圖；圖4a為“PoznanStreet”的原始立體圖像的“紅/綠”圖；圖4b為“PoznanStreet”的左視點(diǎn)圖像的相位一致性圖；圖4c為“PoznanStreet”的左視點(diǎn)圖像的左視差圖像的角視差圖像的視差響應(yīng)圖；圖4d為“PoznanStreet”的左視點(diǎn)圖像的顯著圖；圖4e為“PoznanStreet”的左視點(diǎn)圖像的視覺非舒適性圖；圖4f為“PoznanStreet”的經(jīng)調(diào)整后立體圖像的“紅/綠”圖；圖5a為“UndoDance”的原始立體圖像的“紅/綠”圖；圖5b為“UndoDance”的左視點(diǎn)圖像的相位一致性圖；圖5c為“UndoDance”的左視點(diǎn)圖像的左視差圖像的角視差圖像的視差響應(yīng)圖；圖5d為“UndoDance”的左視點(diǎn)圖像的顯著圖；圖5e為“UndoDance”的左視點(diǎn)圖像的視覺非舒適性圖；圖5f為“UndoDance”的經(jīng)調(diào)整后立體圖像的“紅/綠”圖。具體實(shí)施方式以下結(jié)合附圖實(shí)施例對本發(fā)明作進(jìn)一步詳細(xì)描述。本發(fā)明提出的一種立體圖像視覺舒適度增強(qiáng)方法，其總體實(shí)現(xiàn)框圖如圖1所示，其包括以下步驟：①將待處理的立體圖像的左視點(diǎn)圖像、右視點(diǎn)圖像及左深度圖像對應(yīng)記為{IL(x,y)}、{IR(x,y)}及{DL(x,y)}，其中，(x,y)表示待處理的立體圖像中的像素點(diǎn)的坐標(biāo)位置，1≤x≤W，1≤y≤H，W和H對應(yīng)表示待處理的立體圖像的寬度和高度，IL(x,y)表示{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，IR(x,y)表示{IR(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，DL(x,y)表示{DL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值。②由于立體圖像的空間頻率會影響雙目融合極限，立體圖像的空間頻率越低，雙目的融合極限就越高，觀看的視覺舒適度就越高，因此本發(fā)明方法計(jì)算{IL(x,y)}的相位一致性圖，記為{f1(x,y)}，其中，f1(x,y)表示{f1(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，f1(x,y)亦表示{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的相位一致性特征。在此具體實(shí)施例中，步驟②中的{f1(x,y)}的獲取過程為：②-1、采用現(xiàn)有的log-Garbor濾波器對{IL(x,y)}進(jìn)行濾波處理，得到{IL(x,y)}中的每個像素點(diǎn)在不同尺度因子和不同方向因子下的偶對稱頻率響應(yīng)和奇對稱頻率響應(yīng)，將{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)在尺度因子為α和方向因子為θ下的偶對稱頻率響應(yīng)記為eα,θ(x,y)，將{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)在尺度因子為α和方向因子為θ下的奇對稱頻率響應(yīng)記為oα,θ(x,y)，其中，α表示濾波處理所采用的濾波器的尺度因子，1≤α≤4，θ表示濾波處理所采用的濾波器的方向因子，1≤θ≤4。②-2、根據(jù){IL(x,y)}中的每個像素點(diǎn)在不同尺度因子和不同方向因子下的偶對稱頻率響應(yīng)和奇對稱頻率響應(yīng)，計(jì)算{IL(x,y)}中的每個像素點(diǎn)的相位一致性特征，將{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的相位一致性特征記為f1(x,y)，其中，②-3、根據(jù){IL(x,y)}中的每個像素點(diǎn)的相位一致性特征，獲得{IL(x,y)}的相位一致性圖{f1(x,y)}，其中，{f1(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值為f1(x,y)。③計(jì)算{IL(x,y)}的左視差圖像，記為{dL(x,y)}，其中，dL(x,y)表示{dL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值；然后利用現(xiàn)有的視差轉(zhuǎn)換算法計(jì)算{dL(x,y)}的角視差圖像，記為{φL(x,y)}，其中，φL(x,y)表示{φL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值；由于過大的視差會導(dǎo)致雙眼焦點(diǎn)調(diào)節(jié)和輻輳的嚴(yán)重沖突，進(jìn)而引起視覺不舒適，因此本發(fā)明方法再計(jì)算{φL(x,y)}的視差響應(yīng)圖，記為{f2(x,y)}，其中，f2(x,y)表示{f2(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值。在此具體實(shí)施例中，步驟③中其中，f表示水平相機(jī)陣列中的各個相機(jī)的焦距，L表示待處理的立體圖像的左視點(diǎn)與右視點(diǎn)之間的水平基線距離，zc為待處理的立體圖像的匯聚平面值。在本實(shí)施例中，f，L和zc的值根據(jù)具體的測試序列確定。在此具體實(shí)施例中，步驟③中其中，max()為取最大值函數(shù)。④根據(jù)人眼立體視覺注意力特性，人眼只對部分視覺重要區(qū)域的視覺舒適/不舒適比較敏感，因此本發(fā)明方法將{IL(x,y)}分割成M個互不重疊的子塊；然后通過計(jì)算{IL(x,y)}中的每個子塊的特征對比度和空間緊密度，獲取{IL(x,y)}中的每個子塊的顯著值，將{IL(x,y)}中的第h個子塊的顯著值記為Sh；再將{IL(x,y)}中的每個子塊的顯著值作為該子塊中的所有像素點(diǎn)的顯著值，對于{IL(x,y)}中的第h個子塊，將Sh作為{IL(x,y)}中的第h個子塊中的所有像素點(diǎn)的顯著值，從而得到{IL(x,y)}的顯著圖，記為{f3(x,y)}；其中，M≥1，h的初始值為1，1≤h≤M，f3(x,y)表示{f3(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，f3(x,y)亦表示{IL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的顯著值。在此具體實(shí)施例中，步驟④中的子塊的尺寸大小為8×8，步驟④中的Sh的具體過程為：④-1、將{IL(x,y)}從RGB顏色空間轉(zhuǎn)換到Y(jié)UV顏色空間，得到{IL(x,y)}的亮度分量圖、第一色度分量圖和第二色度分量圖，對應(yīng)記為{YL(x,y)}、{UL(x,y)}和{VL(x,y)}，其中，YL(x,y)表示{YL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，UL(x,y)表示{UL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值，VL(x,y)表示{VL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值。④-2、對{YL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域進(jìn)行DCT變換，得到{YL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域的DCT系數(shù)矩陣，記為然后將中的DC系數(shù)構(gòu)成{IL(x,y)}中的第h個子塊的亮度特征向量，記為的維數(shù)為1；并將經(jīng)Z字形掃描后的前9個AC系數(shù)構(gòu)成{IL(x,y)}中的第h個子塊的紋理特征向量，記為的維數(shù)為9；其中，1≤u≤8,1≤v≤8，表示中坐標(biāo)位置為(u,v)的DCT系數(shù)。④-3、對{UL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域進(jìn)行DCT變換，得到{UL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域的DCT系數(shù)矩陣，記為并對{VL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域進(jìn)行DCT變換，得到{VL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域的DCT系數(shù)矩陣，記為然后將中的DC系數(shù)及中的DC系數(shù)構(gòu)成{IL(x,y)}中的第h個子塊的顏色特征向量，記為的維數(shù)為2；其中，表示中坐標(biāo)位置為(u,v)的DCT系數(shù)，表示中坐標(biāo)位置為(u,v)的DCT系數(shù)。④-4、對{DL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域進(jìn)行DCT變換，得到{DL(x,y)}中與{IL(x,y)}中的第h個子塊相對應(yīng)的尺寸大小為8×8的區(qū)域的DCT系數(shù)矩陣，記為然后將中的DC系數(shù)構(gòu)成{IL(x,y)}中的第h個子塊的深度特征向量，記為的維數(shù)為1；其中，表示中坐標(biāo)位置為(u,v)的DCT系數(shù)。④-5、獲取{IL(x,y)}中的第h個子塊的通用特征向量，記為fh，其中，fh的維數(shù)為13，此處符號“[]”為矢量表示符號。④-6、計(jì)算{IL(x,y)}中的第h個子塊的特征對比度和空間緊密度，對應(yīng)記為FCh和SCh，其中，q為正整數(shù)，1≤q≤M，exp()表示以自然基數(shù)e為底的指數(shù)函數(shù)，符號“||||”為求歐式距離符號，fq表示{IL(x,y)}中的第q個子塊的通用特征向量，σp表示高斯函數(shù)的標(biāo)準(zhǔn)差，在本實(shí)施例中取σp＝0.4，xh表示{IL(x,y)}中的第h個子塊中的中心像素點(diǎn)的坐標(biāo)位置，xq表示{IL(x,y)}中的第q個子塊中的中心像素點(diǎn)的坐標(biāo)位置，σc表示高斯函數(shù)的標(biāo)準(zhǔn)差，在本實(shí)施例中取σc＝0.9，④-7、計(jì)算{IL(x,y)}中的第h個子塊的顯著值Sh，Sh＝FCh×SCh。⑤對{f1(x,y)}、{f2(x,y)}及{f3(x,y)}進(jìn)行融合，得到{IL(x,y)}的視覺非舒適性圖，記為{F(x,y)}，將{F(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值記為F(x,y)，F(xiàn)(x,y)＝f1(x,y)×f2(x,y)×f3(x,y)。⑥計(jì)算{IL(x,y)}中的零視差平面所在的坐標(biāo)位置，記為xZDP，其中，表示取使得F(x,y)的值最大的坐標(biāo)值。⑦計(jì)算xZDP的匯聚平面值，記為然后計(jì)算{dL(x,y)}中的每個像素點(diǎn)經(jīng)調(diào)整后的像素值，將{dL(x,y)}中坐標(biāo)位置為x的像素點(diǎn)經(jīng)調(diào)整后的像素值記為d(x)，其中，f表示水平相機(jī)陣列中的各個相機(jī)的焦距，L表示待處理的立體圖像的左視點(diǎn)與右視點(diǎn)之間的水平基線距離，dZDP表示{IL(x,y)}中的零視差平面所在的坐標(biāo)位置xZDP的視差值，DL(xZDP)表示{DL(x,y)}中坐標(biāo)位置為xZDP的像素點(diǎn)的像素值，DL(x)表示{DL(x,y)}中坐標(biāo)位置為x的像素點(diǎn)的像素值，x∈Ω，Ω表示{DL(x,y)}中的所有像素點(diǎn)的坐標(biāo)位置的集合，Znear表示最小的場景深度值，Zfar表示最大的場景深度值。在本實(shí)施例中，取dZDP＝0，f、L、Znear和Zfar的值根據(jù)具體的測試序列確定。⑧計(jì)算經(jīng)調(diào)整后的右視點(diǎn)圖像，記為將中坐標(biāo)位置為(x,y)的像素點(diǎn)的像素值記為然后將{IL(x,y)}和構(gòu)成一幅新的立體圖像；其中，IL(x+d(x,y),y)表示{IL(x,y)}中坐標(biāo)位置為(x+d(x,y),y)的像素點(diǎn)的像素值，d(x,y)表示{dL(x,y)}中坐標(biāo)位置為(x,y)的像素點(diǎn)經(jīng)調(diào)整后的像素值。以下就利用本發(fā)明方法分別對“Balloons”、“Kendo”、“PoznanStreet”和“UndoDance”三維立體視頻測試序列中的兩個視點(diǎn)進(jìn)行舒適度調(diào)整。在本實(shí)施例中，取“Balloons”、“Kendo”三維立體視頻測試序列的第1個和第2個視點(diǎn)分別作為立體圖像的左視點(diǎn)和右視點(diǎn)，取“PoznanStreet”三維立體視頻測試序列的第5個和第4個視點(diǎn)分別作為立體圖像的左視點(diǎn)和右視點(diǎn)，取“UndoDance”的三維立體視頻測試序列的第1個和第5個視點(diǎn)分別作為立體圖像的左視點(diǎn)和右視點(diǎn)。在本實(shí)施例中，“Balloons”三維立體視頻測試序列的f、Znear和Zfar分別為2241.25607、448.251214和11206.280350；“Kendo”三維立體視頻測試序列的f、Znear和Zfar分別為448.251214、11206.280350和2241.25607；“PoznanStreet”三維立體視頻測試序列的f、Znear和Zfar分別為1732.875727、-34.506386和-2760.510889；“UndoDance”三維立體視頻測試序列的f、Znear和Zfar分別為2302.852541609168、2289和213500。未處理的“Balloons”、“Kendo”、“PoznanStreet”和“UndoDance”三維立體視頻測試序列的匯聚平面落在無窮遠(yuǎn)處，圖2a給出了“Balloons”的原始立體圖像的“紅/綠”圖、圖2b給出了“Balloons”的左視點(diǎn)圖像的相位一致性圖、圖2c給出了“Balloons”的左視點(diǎn)圖像的左視差圖像的角視差圖像的視差響應(yīng)圖、圖2d給出了“Balloons”的左視點(diǎn)圖像的顯著圖、圖2e給出了“Balloons”的左視點(diǎn)圖像的視覺非舒適性圖、圖2f給出了“Balloons”的經(jīng)調(diào)整后立體圖像的“紅/綠”圖；圖3a給出了“Kendo”的原始立體圖像的“紅/綠”圖、圖3b給出了“Kendo”的左視點(diǎn)圖像的相位一致性圖、圖3c給出了“Kendo”的左視點(diǎn)圖像的左視差圖像的角視差圖像的視差響應(yīng)圖、圖3d給出了“Kendo”的左視點(diǎn)圖像的顯著圖、圖3e給出了“Kendo”的左視點(diǎn)圖像的視覺非舒適性圖、圖3f給出了“Kendo”的經(jīng)調(diào)整后立體圖像的“紅/綠”圖；圖4a給出了“PoznanStreet”的原始立體圖像的“紅/綠”圖、圖4b給出了“PoznanStreet”的左視點(diǎn)圖像的相位一致性圖、圖4c給出了“PoznanStreet”的左視點(diǎn)圖像的左視差圖像的角視差圖像的視差響應(yīng)圖、圖4d給出了“PoznanStreet”的左視點(diǎn)圖像的顯著圖、圖4e給出了“PoznanStreet”的左視點(diǎn)圖像的視覺非舒適性圖、圖4f給出了“PoznanStreet”的經(jīng)調(diào)整后立體圖像的“紅/綠”圖；圖5a給出了“UndoDance”的原始立體圖像的“紅/綠”圖、圖5b給出了“UndoDance”的左視點(diǎn)圖像的相位一致性圖、圖5c給出了“UndoDance”的左視點(diǎn)圖像的左視差圖像的角視差圖像的視差響應(yīng)圖、圖5d給出了“UndoDance”的左視點(diǎn)圖像的顯著圖、圖5e給出了“UndoDance”的左視點(diǎn)圖像的視覺非舒適性圖、圖5f給出了“UndoDance”的經(jīng)調(diào)整后立體圖像的“紅/綠”圖。從圖2a至圖5f中可以看出，采用本發(fā)明方法得到的經(jīng)調(diào)整后的立體圖像，由于調(diào)整了正視差和負(fù)視差的范圍，因此明顯提升了觀看者的視覺體驗(yàn)和增強(qiáng)了視覺舒適性。