一種圖像自適應(yīng)顯示方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及一種針對不同尺寸顯示終端上的圖像自適應(yīng)顯示方法,屬于圖像、多 媒體信號處理技術(shù)領(lǐng)域。
【背景技術(shù)】
[0002] 隨著移動設(shè)備的普及,適用于不同網(wǎng)絡(luò)的終端設(shè)備不斷換代更新,電視、筆記本 電腦、PDA、手機等,不同類型、不同尺寸顯示終端的存在成為客觀事實。為了保證持不同 設(shè)備的用戶都能夠舒適地觀看同樣的圖像內(nèi)容,要求圖像內(nèi)容能自適應(yīng)于不同網(wǎng)絡(luò)狀況、 不同尺寸、不同比例的用戶終端,這就要求圖像具有自適應(yīng)技術(shù)。當我們將一幅尺寸大的 高清圖片傳輸?shù)狡聊怀叽缧∏曳直媛实偷娘@示終端上進行顯示時,可能會出現(xiàn)圖像變形失 真、或畫面中的一些關(guān)鍵細節(jié)區(qū)域丟失等問題,從而影響了觀眾欣賞質(zhì)量。為了使不同設(shè)備 的用戶都能舒適地觀看內(nèi)容保存完好沒有失真的圖像,這就需要一個精準的圖像自適應(yīng)系 統(tǒng),使圖像能夠自適應(yīng)的顯示于不同尺寸的終端設(shè)備,使觀眾有最好的觀看體驗。
[0003] 近幾年,已經(jīng)有越來越多的研宄者開始關(guān)注圖像自適應(yīng)顯示這個問題。傳統(tǒng)的圖 像自適應(yīng)方法包括均勾縮放(scaling)技術(shù)和簡單裁切(cropping)技術(shù)。均勾縮放就是對 原始圖像進行均勻下采樣或者插值得到目標尺寸的圖像,而當我們改變圖像的寬高比來均 勻縮放時,往往導致圖像重要區(qū)域內(nèi)容的拉伸失真變形,而且屏幕尺寸越小,分辨率越低, 產(chǎn)生的失真越明顯,這樣造成嚴重的觀賞質(zhì)量下降。簡單裁切技術(shù)是通過手動裁掉圖像的 邊緣內(nèi)容得到顯示圖像最突出部分的目標圖像,而這種方法對不同的顯示尺寸會減掉一些 重要信息區(qū)域,從而造成一些圖像的關(guān)鍵細節(jié)的丟失,使重要區(qū)域顯示不完整,圖片內(nèi)容殘 缺。
[0004] 圖像自適應(yīng)顯示的關(guān)鍵問題是如何獲取圖像的重要內(nèi)容,以及使其重要內(nèi)容或關(guān) 注對象區(qū)域能夠很好的在不同尺寸、不同分辨率的屏幕上顯示出來。常用的一種方法是:通 過細縫裁剪的方法處理圖像中不引人注意的像素內(nèi)容來改變圖像的尺寸,最大限度的保護 重要區(qū)域不發(fā)生形變,同時盡可能的保留原始圖像的全局信息,但如何對細縫裁剪的視覺 影響進行評價是一大難點。
【發(fā)明內(nèi)容】
[0005] 本發(fā)明針對高分辨率圖像在小尺寸或低分辨率顯示器進行顯示時存在的變形失 真及關(guān)鍵細節(jié)的丟失等問題,提供一種能夠自適應(yīng)的調(diào)整圖像尺寸、保證圖像重要區(qū)域信 息完整顯示以及圖像失真最小的針對不同尺寸顯示終端的圖像自適應(yīng)顯示方法。本發(fā)明采 用一種質(zhì)量評價標準監(jiān)控重要信息的變形程度,通過設(shè)定一定的閾值在細縫剪裁和均勻縮 放處理之間進行平衡,阻止圖像重要物體邊緣失真。本發(fā)明結(jié)合了融合局部和全局顯著性 的顯著圖,采用了稠密SIFT流矢量場質(zhì)量評價標準和設(shè)定的閾值使自適應(yīng)方法由細縫裁 剪及時轉(zhuǎn)換成均勻縮放,保證圖像重要區(qū)域不出現(xiàn)傳統(tǒng)細縫裁剪容易出現(xiàn)的重要區(qū)域的邊 緣失真。實驗結(jié)果表明此方法自適應(yīng)后的圖像能夠在滿足顯示尺寸的同時,保證圖像重要 區(qū)域信息完整顯示,圖像的變形失真降到最低。
[0006] 本發(fā)明技術(shù)方案如下:
[0007] -種圖像自適應(yīng)顯示方法,該方法基于圖像內(nèi)容感知,結(jié)合細縫裁剪和均勻縮放, 具體步驟是:
[0008] (1)建立視覺關(guān)注模型:分別計算圖像中每個像素點的局部對照顯著性和全局對 照顯著性,得到局部顯著圖和全局顯著圖;將局部顯著圖和全局顯著圖進行加權(quán)組合,得到 最終的顯著圖;
[0009] (2)細縫的初始化:用步驟⑴中得到的顯著圖作為能量圖計算能量代價圖,根據(jù) 能量代價圖選出可以去除的細縫,并按照能量代價低到能量代價高的順序為圖像中這些可 以去除的細縫進行排序;
[0010] (3)細縫裁剪及圖像裁剪變形的衡量:按照步驟(2)中的排序進行細縫裁剪,并同 時利用SIFT流計算原始圖像和裁剪過程中生成的臨時圖像之間的距離;
[0011] (4)剪裁終止:當原始圖像和剪裁過程中生成的臨時圖像之間的距離超過閾值 Θ,即變形超過設(shè)定指標時,終止細縫裁剪;若剪裁后的圖像未達到目標尺寸,則采用均勻 縮放方法得到目標尺寸的圖像。
[0012] 特別地,步驟(1)的具體實現(xiàn)步驟為:
[0013] a.采用滑動的變窗口來計算每一像素點的亮度、紋理和顏色的局部對照值:將輸 入圖像用高斯金字塔進行多級濾波,計算亮度、紋理和顏色特征的局部對照圖,采取迭代內(nèi) 插求和算法,得到原始圖像尺度上的特征圖,對得到的亮度、紋理和顏色特征圖歸一化并結(jié) 合得到每個像素點的局部對照顯著性;
[0014] b.采用基于顏色特征的全局對照計算圖像中每個像素點的全局對照顯著性:將 顏色特征的差異作為兩個像素間特征的差異,把圖像從RGB空間轉(zhuǎn)換到CIE L*a*b顏色空 間中,采用圖像塊的方式,計算當前像素塊與周圍其他所有像素塊之間的歐氏距離的和并 將其作為該像素塊中心像素點的全局對照值;
[0015] c.將全局對照顯著性作為主要顯著區(qū)域檢測依據(jù),將局部對照顯著圖和全局對照 顯著圖進行加權(quán)組合,得到最終的顯著圖。
[0016] 特別地,步驟(2)的具體實現(xiàn)步驟為:
[0017] a.根據(jù)步驟(1)計算得到的顯著圖計算能量最小代價圖;
[0018] b.根據(jù)能量最小代價圖找能量最小代價縫;
[0019] c.從顯著圖和原始RGB圖中刪除能量最小代價縫,剩下的像素點向右上方依次順 延形成連續(xù)的圖;
[0020] d.對步驟c形成的顯著圖重復(fù)執(zhí)行步驟a至c,得到一個記錄了能量代價從高到 低的需要移除的細縫的位置矩陣。
[0021] 特別地,步驟(3)的具體實現(xiàn)步驟為:
[0022] a.定義兩圖像之間的距離方程:得到兩幅圖之間的稠密SIFT流矢量場,計算兩幅 圖匹配的所有SIFT點距離的平均值作為圖像之間的距離方程,用來評價目標圖片和原始 圖片之間重要信息的變形量;
[0023] b.利用步驟⑵中可以裁剪的細縫排序?qū)D像尺寸進行逐次調(diào)整,每次移除10條 細縫,并且在每次得到的臨時圖像上計算它與原始圖像的距離。
[0024] 本發(fā)明通過構(gòu)建一種基于局部和全局對照顯著性的視覺注意模型來有效地提取 圖像的顯著區(qū)域(即