圖像處理裝置、圖像處理方法和程序的制作方法
【專利摘要】本發(fā)明涉及圖像處理裝置、圖像處理方法和程序。一種圖像處理裝置,該圖像處理裝置包括控制單元,該控制單元從輸入圖像提取靜止圖像部分并且改變靜止圖像部分。
【專利說明】圖像處理裝置、圖像處理方法和程序
【技術(shù)領(lǐng)域】
[0001 ] 本發(fā)明涉及圖像處理裝置、圖像處理方法和程序。
【背景技術(shù)】
[0002]專利文獻(xiàn)I和2公開了為了防止顯示器的烙印(burn-1n)將整個顯示圖像在顯示器的顯示畫面內(nèi)移動的技術(shù)。
[0003][引用列表]
[0004][專利文獻(xiàn)]
[0005][專利文獻(xiàn)I]
[0006]JP2007-304318A
[0007][專利文獻(xiàn)2]
[0008]JP2005-49784A
【發(fā)明內(nèi)容】
[0009][技術(shù)問題]
[0010]然而,因?yàn)樵谏鲜黾夹g(shù)中移動顯示圖像,所以用戶在用視覺認(rèn)識時感到煩惱。因此,尋求的是能夠減少用戶感到的煩惱并且減少顯示器的烙印的技術(shù)。
[0011][問題的解決方法]
[0012]根據(jù)本發(fā)明,提供了一種圖像處理裝置,該圖像處理裝置包括:控制單元,該控制單元被構(gòu)造為從輸入圖像提取靜止圖像部分,并且改變所述靜止圖像部分。
[0013]根據(jù)本發(fā)明,提供了 一種圖像處理方法,該圖像處理方法包括:從輸入圖像提取靜止圖像部分;以及改變所述靜止圖像部分。
[0014]根據(jù)本發(fā)明,提供了一種程序,該程序致使計(jì)算機(jī)實(shí)現(xiàn)控制功能,該控制功能用于從輸入圖像提取靜止圖像部分并且改變所述靜止圖像部分。
[0015]根據(jù)本發(fā)明,可以從輸入圖像提取靜止圖像部分并且可以改變靜止圖像部分。
[0016][本發(fā)明的有益效果]
[0017]如上所述,根據(jù)本發(fā)明,圖像處理裝置能夠在顯示器上顯示靜止圖像部分已改變的輸入圖像。因此,圖像處理裝置可以在固定整個所顯示圖像的顯示位置之后改變靜止圖像部分,從而減少用戶感到的煩惱和顯示器的烙印。
【專利附圖】
【附圖說明】
[0018]圖1是示出根據(jù)本發(fā)明的實(shí)施方式的將被輸入到圖像處理裝置的輸入圖像的例子的說明圖。
[0019]圖2是示出根據(jù)本發(fā)明的實(shí)施方式的將被輸入到圖像處理裝置的輸入圖像的例子的說明圖。
[0020]圖3是示出根據(jù)本發(fā)明的實(shí)施方式的將被輸入到圖像處理裝置的輸入圖像的例子的說明圖。
【具體實(shí)施方式】
[0031]本文中將參照附圖詳細(xì)描述本發(fā)明的有利實(shí)施方式。注意的是,用相同的參考標(biāo)號表示具有基本相同功能的構(gòu)造元件,使得省略了對其的重復(fù)描述。
[0032]注意的是,將以下面的次序提供描述。
[0033]1.【背景技術(shù)】研究
[0034]2.由圖像處理裝置進(jìn)行處理的概述
[0035]3.圖像處理裝置的構(gòu)造
[0036]4.由圖像處理裝置進(jìn)行的處理的過程
[0037]〈1.【背景技術(shù)】研究〉
[0038]發(fā)明人已經(jīng)通過研究背景技`術(shù)得出根據(jù)本發(fā)明實(shí)施例的圖像處理裝置10。因此,首先,將描述發(fā)明人進(jìn)行的研究。
[0039]在運(yùn)動圖像性質(zhì)、視角性質(zhì)、顏色再現(xiàn)性等方面,自發(fā)光型顯示裝置(如陰極射線管(CRT)、等離子體顯示面板(PDP)和有機(jī)發(fā)光顯示器(OLED))優(yōu)于需要背光的液晶顯示裝置。然而,當(dāng)長時間顯示靜止圖像時,顯示靜止圖像的元件持續(xù)發(fā)射相同顏色的光,因此,發(fā)光性質(zhì)可能劣化。另外,發(fā)光性質(zhì)劣化的元件在圖像切換時可能顯示先前圖像的殘像。這種現(xiàn)象被稱為烙印(burn-1n)。靜止圖像的亮度(對比度)越大,越容易出現(xiàn)烙印。
[0040]為了防止/減少烙印,已經(jīng)提出了一種方法,該方法通過隨著時間推移將整個顯示畫面移動若干像素來分散發(fā)光的像素,并且使靜止圖像的烙印邊界不太引人注意。
[0041]例如,專利文獻(xiàn)I公開了一種在考慮OLED的發(fā)光性質(zhì)的情況下移動整個畫面的顯示位置的方法。專利文獻(xiàn)2公開了一種從運(yùn)動圖像的運(yùn)動向量得到整個圖像被在哪個方向上移動的方法。也就是說,專利文獻(xiàn)I和2公開了為了防止顯示器的烙印將整個顯示圖像在顯示畫面內(nèi)移動的技術(shù)。
[0042]然而,在這種技術(shù)中,整個顯示圖像被移動。另外,當(dāng)顯示圖像被移動時,顯示圖像的外部部分(即,黑框的寬度)改變。因此,用戶容易認(rèn)識到顯示圖像的顯示位置已經(jīng)改變。因此,用戶因顯示圖像的移動而感到煩惱。另外,為了即使在整個顯示圖像被左右和上下移動時也顯示整個顯示圖像,必須將顯示裝置的像素數(shù)量增加至比所顯示圖像的像素數(shù)量多。[0043]因此,發(fā)明人已經(jīng)努力研究了上述【背景技術(shù)】,并且已經(jīng)得到根據(jù)本實(shí)施方式的圖像處理裝置10。圖像處理裝置10 (示意性地講)從輸入圖像提取靜止圖像部分,并且改變靜止圖像部分(例如,移動靜止圖像部分,改變顯示放大倍數(shù)等)。圖像處理裝置10然后將輸入圖像作為顯示圖像在顯示器上顯示。因此,圖像處理裝置10可以在固定整個所顯示圖像的顯示位置之后改變靜止圖像部分,從而減少用戶感到的煩惱和顯示器的烙印。另外,顯示器的像素數(shù)量可能只是與所顯示圖像的程度近似的程度。因此,圖像處理裝置10可以減少顯示器的像素數(shù)量。
[0044]〈2.由圖像處理裝置進(jìn)行處理的概述〉
[0045]然后,將參照圖1至圖5描述由圖像處理裝置10進(jìn)行處理的概述。圖1至圖3示出將被輸入到圖像處理裝置10的輸入圖像的例子。在這些例子中,構(gòu)成同一場景的第(n-1)幀的輸入圖像Fl (η-1)、第η幀的輸入圖像Fl (η)和第(η+1)幀的輸入圖像Fl (η+1)被順序輸入到圖像處理裝置10 (η是整數(shù))。注意的是,在本實(shí)施方式中,構(gòu)成每個輸入圖像的像素具有xy坐標(biāo)。X軸是在圖1中的水平方向上延伸的軸,并且y軸是在垂直方向上延伸的軸。在本實(shí)施方式中,雖然繪出簡單圖像(星形圖像等)作為用于描述處理的輸入圖像,但更復(fù)雜的圖像(字幕等)當(dāng)然可應(yīng)用于本實(shí)施方式。
[0046]圓形圖像110和星形圖像120被繪于輸入圖像Fl (n-1)、F1 (η)和Fl (η+1)(下文中,這些輸入圖像被統(tǒng)稱為“輸入圖像F1”)中。因?yàn)樵诿總€幀中星形圖像120的顯示位置是固定的,所以它表現(xiàn)為靜止圖像部分,而在每個幀中圓形圖像110的顯示位置是移動的(從左端移到右端),并因此表現(xiàn)為運(yùn)動圖像部分。如果星形圖像120長時間顯示于同一顯示位置,則有可能造成星形圖像120的顯示位置出現(xiàn)烙印。星形圖像120的亮度越高,出現(xiàn)烙印的可能性越大。
[0047]因此,圖像處理裝置10改變星形圖像120。具體地講,如圖2和圖4中所示,圖像處理裝置10移動星形圖像120在輸入Fl (η)中的顯示位置(執(zhí)行所謂的“軌道處理(orbitprocessing)”)以產(chǎn)生靜止插補(bǔ)圖像Fla(n)。這里,運(yùn)動方向與構(gòu)成圓形圖像110的周邊區(qū)域的運(yùn)動圖像部分(這里,圓形圖像110的運(yùn)動向量)處于相同方向或相反方向。另外,雖然運(yùn)動量等于運(yùn)動向量的絕對值,但運(yùn)動量可以不同于絕對值。
[0048]這里,在靜止插補(bǔ)圖像Fla(n)中,由于星形圖像120的運(yùn)動,導(dǎo)致形成空白部分120a??瞻撞糠?20a形成在輸入圖像Fl (η)中的星形圖像120的顯示區(qū)域中與靜止插補(bǔ)圖像Fla(n)中的星形圖像120的顯示區(qū)域不重疊的部分中。
[0049]因此,圖像處理裝置10對空白部分120a進(jìn)行插補(bǔ)。具體地講,圖像處理裝置10從輸入圖像Fl (η-1)和Fl (η+1)(即先前幀和后續(xù)幀)提取與空白部分120a對應(yīng)的空白對應(yīng)部分。更具體地講,當(dāng)期望以與圓形圖像110的運(yùn)動向量相同的方向移動星形圖像120時,圖像處理裝置10從作為先前幀的輸入圖像Fl (η-1)提取空白對應(yīng)部分。同時,當(dāng)期望以與圓形圖像110的運(yùn)動向量相反的方向移動星形圖像120時,圖像處理裝置10從作為后續(xù)幀的輸入圖像Fl (η+1)提取空白對應(yīng)部分。然后,如圖5中所示,圖像處理裝置10通過將所提取區(qū)域疊加在空白部分120a上,產(chǎn)生合成圖像Flb (η)。圖像處理裝置10然后把合成圖像Flb (η)作為第η幀輸入圖像進(jìn)行顯示來取代輸入圖像Fl (η)。
[0050]因此,圖像處理裝置10可以改變星形圖像120 (在這個例子中,可以將星形圖像120移動若干像素),從而抑制顯示星形圖像120的元件的劣化,這導(dǎo)致顯示器的烙印減少。另外,因?yàn)閳D像處理裝置10不必移動整個顯示圖像的顯示位置,所以用戶感到的煩惱可以減少。另外,因?yàn)轱@示器的像素數(shù)量可以只是與所顯示圖像的像素數(shù)量近似的程度,所以圖像處理裝置10可以減少顯示器的像素數(shù)量。注意的是,雖然在這個例子中,只調(diào)節(jié)了第η幀的輸入圖像Fl (η)的星形圖像120,但還可以類似地調(diào)節(jié)其它幀的輸入圖像。另外,雖然星形圖像120在圖4中的右方向上移動,但是星形圖像120也可以在左方向上移動。
[0051]<3.圖像處理裝置的構(gòu)造〉
[0052]接下來,將基于圖6中示出的框圖描述圖像處理裝置10的構(gòu)造。圖像處理裝置10包括存儲器11和18和控制單元10a??刂茊卧狪Oa包括運(yùn)動向量計(jì)算單元12、像素差計(jì)算單元13、移動部分檢測單元14、靜止部分檢測單元15、靜止類型確定單元16和方向等確定單元17。另外,控制單元IOa包括靜止插補(bǔ)單元19、運(yùn)動插補(bǔ)單元20、縮放插補(bǔ)單元21和合成單元22。
[0053]注意的是,圖像處理裝置10包括硬件構(gòu)造,包括CPU、ROM、RAM、硬盤等。允許圖像處理裝置10實(shí)現(xiàn)控制單元IOa的程序被存儲在ROM中。CPU讀取ROM中記錄的程序并且執(zhí)行程序。因此,這些硬件構(gòu)造實(shí)現(xiàn)控制單元10a。注意的是,在本實(shí)施方式中,“先前幀”意思是當(dāng)前幀之前的一個幀并且“后續(xù)幀”意思是當(dāng)前幀之后的一個幀。也就是說,控制單元IOa從前一幀和后一幀中檢測空白對應(yīng)部分。然而,控制單元IOa可以從其它先前幀(或其它后續(xù))幀中提取空白對應(yīng)部分。
[0054]存儲器11還用作幀存儲器,并且存儲具有至少兩個或更多個場、或兩個或更多個幀的輸入圖像。運(yùn)動向量計(jì)算單元12從存儲器11獲取當(dāng)前幀的輸入圖像和先前幀的輸入圖像。另外,運(yùn)動向量計(jì)算單元12從靜止部分檢測單元15獲取靜止圖像部分信息。這里,靜止圖像部分信息指示構(gòu)成靜止圖像部分的像素。
[0055]然后,運(yùn)動向量計(jì)算單元12基于該信息以塊為單位計(jì)算當(dāng)前幀的輸入圖像的運(yùn)動向量。也就是說,運(yùn)動向量計(jì)算單元12從當(dāng)前幀排除靜止圖像部分,并且將除了靜止圖像部分之外的區(qū)域劃分成多個塊。這里,運(yùn)動向量計(jì)算單元12將靜止圖像部分的周邊區(qū)域劃分成第一塊并且將除了周邊區(qū)域之外的區(qū)域(即,被分開的區(qū)域)劃分成第二塊。第一塊小于第二塊。也就是說,在詳細(xì)檢測靜止圖像部分的周邊區(qū)域的運(yùn)動的同時,與周邊區(qū)域相比,運(yùn)動向量計(jì)算單元12粗略檢測其它區(qū)域的運(yùn)動。如以下描述的,這是因?yàn)椋o止圖像部分的周邊區(qū)域是必須對空白部分進(jìn)行插補(bǔ)的區(qū)域。雖然第一塊和第二塊的大小不受特別限制,但第一塊具有(例如)2X2個像素的大小,并且第二塊具有16X16個像素的大小。周邊區(qū)域的大小也不受特別限制。然而,周邊區(qū)域的外邊緣部分和靜止圖像部分之間的距離可以是許多像素(例如,5個至6個像素)。
[0056]運(yùn)動向量計(jì)算單元12然后從存儲器11獲取先前幀的運(yùn)動向量信息,并且匹配當(dāng)前幀的塊和先前幀的塊(執(zhí)行塊匹配),以將當(dāng)前幀的塊和先前幀的塊彼此相關(guān)聯(lián)。運(yùn)動向量計(jì)算單元12然后基于當(dāng)前幀的塊和先前幀的塊,計(jì)算當(dāng)前幀的塊的運(yùn)動向量。運(yùn)動向量是指示一個幀期間每個塊的移動方向和移動量的向量信息。塊匹配和計(jì)算運(yùn)動向量的方法不受特別限制。例如,使用用于MPEG圖像的運(yùn)動評估的絕對偏差估計(jì)(SAD)之和,執(zhí)行其處理。
[0057]運(yùn)動向量計(jì)算單兀12將與每個塊的運(yùn)動向量相關(guān)的運(yùn)動向量信息輸出到移動部分檢測單元14、靜止部分檢測單元15、靜止插補(bǔ)單元19和運(yùn)動插補(bǔ)單元20。運(yùn)動向量計(jì)算單元12將運(yùn)動向量信息存儲在存儲器11中。當(dāng)計(jì)算下一幀的運(yùn)動向量時,使用存儲器11中存儲的運(yùn)動向量信息。
[0058]像素差計(jì)算單元13從存儲器11獲取當(dāng)前幀的輸入圖像、先前幀的輸入圖像和后續(xù)幀的輸入圖像。像素差計(jì)算單元13然后比較構(gòu)成當(dāng)前幀的像素和構(gòu)成先前幀和后續(xù)幀的像素,以提取每個像素的靜止圖像部分。
[0059]具體地講,像素差計(jì)算單元13基于以下的表達(dá)式(I)計(jì)算每個像素P(x,y)的亮度差值A(chǔ)PL。
[0060]Δ PL= IP (F (n-1),x, y) +P (F (η+1),x, y) _2*Ρ (F (η), χ, y) |...(I)
[0061]在表達(dá)式(I)中,P(F(n-1), x, y)、P (F (n), x, y)和 P(F(n+l), x, y)分別代表先前幀、當(dāng)前幀和后續(xù)幀中的像素P(x,y)的亮度。
[0062]這里,將參照圖8和圖9描述亮度差值A(chǔ)PL的計(jì)算例子。在這個例子中,如圖8中所示,第(η-1)幀至第(n+2)幀的輸入圖像F2 (η-1)至F2 (n+2)被輸入到圖像處理裝置10。這些輸入圖像F2(n-1)至F2(n+2)構(gòu)成同一場景。在這個例子中,因?yàn)樵诿總€幀中圓形圖像210的顯示位置是固定的,所以圓形圖像210用作靜止圖像部分。在每個幀中,三角形圖像220的顯示位置是移動的(從右下端部分移動到上左端部分),因此三角形圖像220用作運(yùn)動圖像部分。箭頭220a代表三角形圖像220的運(yùn)動向量。在這個例子中,用上述表達(dá)式(I)計(jì)算圓形圖像210內(nèi)的像素P(x,y)的亮度差值A(chǔ)PL。
[0063]像素差計(jì)算單元13產(chǎn)生與每個像素的亮度差值Λ PL相關(guān)的亮度差值信息,并且將該信息輸出到移動部分檢測單元14和靜止部分檢測單元15。
[0064]注意的是,針對每個像素執(zhí)行像素差計(jì)算單元13的處理,因此處理的負(fù)荷大于針對每個塊進(jìn)行計(jì)算的負(fù)荷。因此,由運(yùn)動向量計(jì)算單元12將輸入圖像粗略劃分成靜止圖像塊和運(yùn)動圖像塊,并且可以針對靜止圖像塊執(zhí)行像素差計(jì)算單元13的處理。
[0065]在這種情況下,例如,運(yùn)動向量計(jì)算單元12將輸入圖像劃分成具有相同尺寸的塊,并且針對每個塊執(zhí)行塊匹配等,以計(jì)算每個塊的運(yùn)動向量。運(yùn)動向量計(jì)算單元12然后將運(yùn)動向量信息輸出到像素差計(jì)算單元13。當(dāng)運(yùn)動向量的絕對值(大小)小于預(yù)定的參考向量的大小時,像素差計(jì)算單元13將具有運(yùn)動向量的塊識別為靜止圖像塊。像素差計(jì)算單元13然后計(jì)算構(gòu)成靜止圖像塊的像素的亮度差值A(chǔ)PL,并且將亮度差值信息輸出到靜止部分檢測單元15。靜止部分檢測單元15通過下述的處理產(chǎn)生靜止圖像部分信息,并且將該信息輸出到運(yùn)動向量計(jì)算單元12。運(yùn)動向量計(jì)算單元12基于靜止圖像部分信息只將靜止圖像部分的周邊區(qū)域再劃分成第一塊,并且針對第一塊執(zhí)行上述處理。運(yùn)動向量計(jì)算單元12然后將運(yùn)動向量信息輸出到移動部分檢測單元14等。根據(jù)該處理,像素差計(jì)算單元13可以從輸入圖像之中僅僅計(jì)算具有高概率成為靜止圖像部分的那部分的亮度差值A(chǔ)PL,從而降低處理負(fù)荷。
[0066]移動部分檢測單元14基于運(yùn)動向量信息和亮度差值信息從當(dāng)前幀的輸入圖像中檢測運(yùn)動圖像部分。具體地講,移動部分檢測單元14將包括其中亮度差值等于或大于預(yù)定參考差值的像素的塊識別為運(yùn)動圖像部分。另外,如果運(yùn)動向量的絕對值(大小)等于或大于預(yù)定參考向量的大小,則移動部分檢測單元14將具有運(yùn)動向量的塊識別為運(yùn)動圖像部分。移動部分檢測單元14然后產(chǎn)生指示用作運(yùn)動圖像部分的塊的運(yùn)動圖像部分信息,并且將該信息輸出到靜止類型確定單元16。[0067]靜止部分檢測單元15基于亮度差值信息從當(dāng)前幀的輸入圖像中檢測靜止圖像部分。具體地講,靜止部分檢測單元15將其中亮度差值小于參考差值的像素識別為靜止圖像部分。以此方式,在本實(shí)施方式中,靜止部分檢測單元15以像素為單位檢測靜止圖像部分。因此,靜止圖像部分的檢測精度提高。靜止部分檢測單元15產(chǎn)生指示構(gòu)成靜止圖像部分的像素的靜止圖像信息,并且將該信息輸出到運(yùn)動向量計(jì)算單元12和靜止類型確定單元16。
[0068]注意的是,靜止圖像部分的例子包括具有給定大小的區(qū)域、圖、符號等。具體地講,靜止圖像部分的例子包括標(biāo)識、時鐘圖、屏幕底部出現(xiàn)的字幕。靜止部分檢測單元15將靜止圖像信息存儲在存儲器18中。另外,當(dāng)發(fā)生場景改變時,靜止部分檢測單元15刪除存儲器18中的靜止圖像信息。
[0069]靜止類型確定單元16基于運(yùn)動圖像部分信息和靜止圖像信息確定移動輸入圖像的靜止類型。這里,在本實(shí)施方式中,靜止類型是“運(yùn)動圖像”、“部分區(qū)域靜止”和“整個區(qū)域靜止”中的一種。
[0070]“運(yùn)動圖像”指示其中靜止圖像部分形成不同于“部分區(qū)域靜止”的形狀的輸入圖像。在“運(yùn)動圖像”的輸入圖像中,靜止圖像部分常常小于運(yùn)動圖像部分,如標(biāo)識、時鐘的圖和賽事得分。
[0071]“部分區(qū)域靜止”指示其中在χ方向上或者在y方向上在橫跨輸入圖像的兩端之間的長度上形成靜止圖像部分的輸入圖像。在圖11中示出用作“部分區(qū)域靜止”的輸入圖像的例子。在這個例子中,在橫跨X方向上的兩端之間的長度上形成靜止圖像部分320?!安糠謪^(qū)域靜止”的輸入圖像的例子包括其中圖像的下部是用于字幕等的區(qū)域的輸入圖像、和其中在被劃分成“運(yùn)動圖像”的圖像周圍形成黑帶圖像(或某種靜止圖像部分)的輸入圖像。在這些輸入圖像中,靜止圖像部分和運(yùn)動圖像部分之間的邊界往往是固定的,因此往往出現(xiàn)烙印。
[0072]“整個區(qū)域靜止”指示其中整個區(qū)域出于某些原因(例如,用戶已經(jīng)執(zhí)行停止操作)保持靜止的“運(yùn)動圖像”或“部分區(qū)域靜止”?!罢麄€區(qū)域靜止”的輸入圖像的例子包括其中整個區(qū)域保持完全靜止的圖像、和顯示人正在中心處說話的輸入圖像。注意的是,當(dāng)前一例子的完全靜止繼續(xù)更長時間時,畫面可以被轉(zhuǎn)換到屏幕保護(hù)程序等。在本實(shí)施方式中,主要假設(shè)運(yùn)動圖像狀態(tài)和靜止?fàn)顟B(tài)之間狀態(tài)轉(zhuǎn)變和這類狀態(tài)轉(zhuǎn)變的重復(fù)。注意的是,即使輸入圖像的狀態(tài)被轉(zhuǎn)換,靜止圖像部分如字幕的顯示位置也是相同的。因此,靜止圖像部分往往出現(xiàn)烙印。在圖13中示出用作“整個區(qū)域靜止”的輸入圖像的例子。在這個例子中,當(dāng)輸入圖像F5包括靜止圖像部分520和運(yùn)動圖像部分510時,運(yùn)動圖像部分510在某些時刻保持靜止。在這種情況下,不管輸入圖像F5的狀態(tài)如何,靜止圖像部分520的顯示位置是固定的,因此,與顯示運(yùn)動圖像部分510的元件相比,顯示靜止圖像部分520的元件更有可能造成烙印。
[0073]如上所述,在本實(shí)施方式中,靜止類型的輸入圖像被劃分成三種類型。另外,如下所述,必須針對每種靜止類型變化改變靜止圖像部分的方法。因此,靜止類型確定單元16基于運(yùn)動圖像部分信息和靜止圖像部分信息確定輸入圖像的靜止類型。靜止類型確定單元16然后將與判斷結(jié)果相關(guān)的靜止類型信息輸出到方向等確定單元17。
[0074]方向等確定單元17基于靜止類型信息等確定靜止圖像部分的改變方法、改變方向和改變量。[0075]當(dāng)輸入圖像是“運(yùn)動圖像”時,方向等確定單元17確定改變方法是“移動”。如上所述,這是因?yàn)椋?dāng)移動靜止圖像部分時,形成空白部分,并且可以使用另一幀的空白對應(yīng)部分對空白部分進(jìn)行插補(bǔ)。當(dāng)然,方向等確定單元17可以確定改變方法是用于“改變顯示倍率”。在這種情況下,執(zhí)行類似于下述“整個區(qū)域靜止”的調(diào)節(jié)。
[0076]方向等確定單元17基于運(yùn)動圖像部分的運(yùn)動向量確定靜止圖像部分的改變方向。也就是說,方向等確定單元17提取構(gòu)成靜止圖像部分的周邊區(qū)域的運(yùn)動圖像部分的運(yùn)動向量,并且計(jì)算運(yùn)動向量的算術(shù)平均值。方向等確定單元17然后確定靜止圖像部分的改變方向,也就是說,移動方向與運(yùn)動向量的算術(shù)平均值是相同方向或相反方向。
[0077]這里,方向等確定單元17從存儲器18獲取圖像劣化信息并且基于圖像劣化信息確定移動方向。這里,圖像劣化信息指示通過針對每個元件累積元件的顯示亮度而得到的值。較大的值指示元件被更頻繁使用(換句話說,元件劣化)。也就是說,圖像劣化信息指示構(gòu)成顯示器的顯示屏幕的每個像素的使用狀況。從抑制烙印的角度來看,有利的是,致使劣化程度低的元件顯示靜止圖像部分。因此,方向等確定單元17參考移動方向上元件的圖像劣化信息,并且在存在劣化程度低的像素的方向上移動靜止圖像部分。注意的是,圖像劣化信息可以是顯示亮度累計(jì)值之外的值。例如,圖像劣化信息可以是顯示大于或等于預(yù)定值的亮度的次數(shù)。
[0078]注意的是,因?yàn)椤斑\(yùn)動圖像”的輸入圖像的靜止圖像部分和運(yùn)動圖像部分的顯示位置頻繁切換,所以顯示“運(yùn)動圖像”的輸入圖像的元件被平均使用。因此,在所有元件中,劣化程度大致是平均的。同時,在下述的“部分區(qū)域靜止”中,因?yàn)樘囟ㄔ掷m(xù)顯示靜止圖像部分,所以劣化程度變大。因此,圖像劣化信息尤其可用于確定“部分區(qū)域靜止”的靜止圖像部分的移動方向。
[0079]方向等確定單元17基于運(yùn)動圖像部分的運(yùn)動向量確定靜止圖像部分的改變量,即,移動量。也就是說,方向等確定單元17提取構(gòu)成靜止圖像部分的周邊區(qū)域的運(yùn)動圖像部分的運(yùn)動向量,并且計(jì)算運(yùn)動向量的算術(shù)平均值。方向等確定單元17然后確定靜止圖像部分的移動量是與運(yùn)動向量的算術(shù)平均值相同的值。當(dāng)然,移動量不限于以上值,并且例如可以是比運(yùn)動向量的算術(shù)平均值小的值。例如,方向等確定單元17可以基于圖像劣化信息確定改變量。具體地講,當(dāng)如果改變量小于運(yùn)動向量的算術(shù)平均值可以減少器件的劣化時,則方向等確定單元17確定改變量小于運(yùn)動向量的算術(shù)平均值。
[0080]當(dāng)輸入圖像是“部分區(qū)域靜止”時,方向等確定單元17確定改變方法為“移動”。這是因?yàn)?,即使在這種靜止類型中,由于靜止圖像部分移動也造成空白部分,并且可以通過另一幀的空白對應(yīng)部分或者通過當(dāng)前幀的靜止圖像部分對這個空白部分進(jìn)行插補(bǔ)。以下將描述細(xì)節(jié)。
[0081 ] 方向等確定單元17確定靜止圖像部分的改變方向(也就是說,移動方向)是X方向或y方向。具體地講,當(dāng)靜止圖像部分在橫跨χ方向上的兩端之間的長度上形成時,方向等確定單元17確定改變方向是y方向。同時,當(dāng)靜止圖像部分在橫跨y方向上的兩端之間的長度上形成時,方向等確定單元17確定改變方向是χ方向。靜止圖像部分的移動方向是與運(yùn)動圖像部分的運(yùn)動向量相交、相同或相反的方向。注意的是,方向等確定單元17可以確定移動方向是傾斜方向。在這種情況下,移動方向是χ方向和y方向的組合。當(dāng)移動方向是傾斜方向時,下述的靜止插補(bǔ)單元19和運(yùn)動插補(bǔ)單元20進(jìn)行的處理也是對應(yīng)于χ方向和I方向的處理的組合。
[0082]這里,方向等確定單元17可以從存儲器18獲取圖像劣化信息并且基于圖像劣化信息確定移動方向。也就是說,方向等確定單元17參照移動方向上的元件的圖像劣化信息,并且將靜止圖像部分移動到其中存在劣化程度較低的元件的方向上。
[0083]方向等確定單元17基于運(yùn)動圖像部分的運(yùn)動向量確定靜止圖像部分的改變量,也就是說,移動量。也就是說,方向等確定單元17提取構(gòu)成靜止圖像部分的周邊區(qū)域的運(yùn)動圖像部分的運(yùn)動向量,并且計(jì)算運(yùn)動向量的算術(shù)平均值。方向等確定單元17然后確定靜止圖像部分的移動量是與運(yùn)動向量的算術(shù)平均值相同的值。當(dāng)然,移動量不限于這個值,并且例如可以是比運(yùn)動向量的算術(shù)平均值小的值。例如,方向等確定單元17可以基于圖像劣化信息確定改變量。具體地講,當(dāng)如果改變量小于運(yùn)動向量的算術(shù)平均值可以減少元件的劣化時,則方向等確定單元17確定改變量小于運(yùn)動向量的算術(shù)平均值。
[0084]可供選擇地,方向等確定單元17可以在將靜止圖像部分移動到與運(yùn)動向量相交的方向上,或者尤其是與運(yùn)動向量垂直的方向上時,在不考慮運(yùn)動向量的情況下確定改變量。這是因?yàn)椋缦滤?,?dāng)將靜止圖像部分移動到與運(yùn)動向量垂直的方向上時,通過靜止圖像部分對空白部分進(jìn)行插補(bǔ),因此不必考慮運(yùn)動向量。
[0085]當(dāng)輸入圖像是“整個區(qū)域靜止”時,方向等確定單元17確定改變方法是“改變顯示倍率”。當(dāng)輸入圖像是“整個區(qū)域靜止”時,運(yùn)動圖像部分也被暫時停止。因此,沒有精確計(jì)算運(yùn)動圖像部分的運(yùn)動向量(運(yùn)動向量暫時變成O或接近O的值)。因此,圖像處理裝置10不必基于運(yùn)動向量對由于靜止圖像部分的移動而造成的空白部分進(jìn)行插補(bǔ)。因此,當(dāng)輸入圖像是“整個區(qū)域靜止”時,方向等確定單元17確定改變方法是“改變顯示倍率”。
[0086]方向等確定單元17確定靜止圖像部分的改變方向和改變量,也就是說,顯示倍率的X分量和y分量。當(dāng)X分量大于I時,靜止圖像部分在X方向上被放大,并且當(dāng)X分量的值小于I時,靜止圖像部分在χ方向上被縮小。對于y分量,同樣如此。這里,方向等確定單元17可以從存儲器18獲取圖像劣化信息并且基于圖像劣化信息確定顯示倍率的χ分量和I分量。具體內(nèi)容與“運(yùn)動圖像”和“部分區(qū)域靜止”的具體內(nèi)容近似。
[0087]方向等確定單元17將與改變量相關(guān)的改變方法、改變方向和改變信息輸出到靜止插補(bǔ)單元19、運(yùn)動插補(bǔ)單元20和縮放插補(bǔ)單元21。
[0088]靜止插補(bǔ)單元19從存儲器11獲取當(dāng)前幀的輸入圖像,并且基于從運(yùn)動向量計(jì)算單元12和方向等確定單元17提供的信息和當(dāng)前幀的輸入圖像,產(chǎn)生靜止插補(bǔ)圖像。
[0089]將基于圖8和圖10至圖13描述靜止插補(bǔ)單元19進(jìn)行的處理的具體例子。首先,將描述當(dāng)輸入圖像是“運(yùn)動圖像”時執(zhí)行的處理的例子。在這個例子中,圖8中示出的輸入圖像F2(n-1)至F2(n+2)被輸入到圖像處理裝置10。另外,當(dāng)前幀是第η幀。
[0090]如圖10中所示,靜止插補(bǔ)單元19將圓形圖像210(即輸入圖像F2(n)的靜止圖像部分)在箭頭210a的方向(與三角形圖像220的運(yùn)動向量相同的方向)上移動以產(chǎn)生靜止插補(bǔ)圖像F2a (η)。這里,移動量是與三角形圖像220的運(yùn)動向量的大小近似的程度。因此,在靜止插補(bǔ)圖像F2a(n)中形成空白部分210b。
[0091]接下來,將描述當(dāng)輸入圖像的靜止類型是“部分區(qū)域靜止”時執(zhí)行的處理的例子。在這個例子中,圖11中示出的輸入圖像F3被輸入到圖像處理裝置10。輸入圖像F3包括運(yùn)動圖像部分310和靜止圖像部分320。箭頭310a指不運(yùn)動圖像部分310的運(yùn)動向量。[0092]如圖11中所示,靜止插補(bǔ)單元19將靜止圖像部分320向上移動(在箭頭320a的方向上)。也就是說,靜止插補(bǔ)單元19將靜止圖像部分320在垂直于運(yùn)動向量的方向上移動。因此,靜止插補(bǔ)單元19產(chǎn)生靜止插補(bǔ)圖像F3a。在靜止插補(bǔ)圖像F3a中形成空白部分330。
[0093]接下來,將描述當(dāng)輸入圖像的靜止類型是“部分區(qū)域靜止”時執(zhí)行的處理的另一個例子。在這個例子中,圖12中示出的輸入圖像F4被輸入到圖像處理裝置10。輸入圖像F4包括運(yùn)動圖像部分410和靜止圖像部分420。箭頭410a指示運(yùn)動圖像部分410的運(yùn)動向量。
[0094]如圖12中所示,靜止插補(bǔ)單元19將靜止圖像部分420向下移動(在箭頭420a的方向上)。也就是說,靜止插補(bǔ)單元19將靜止圖像部分420在與運(yùn)動向量相同的方向上移動。因此,靜止插補(bǔ)單元19產(chǎn)生靜止插補(bǔ)圖像F4a。在靜止插補(bǔ)圖像F4a中形成空白部分430。注意的是,因?yàn)橛捎陟o止圖像部分420向下移動導(dǎo)致靜止插補(bǔ)圖像F4a被放大,所以靜止插補(bǔ)單元19對靜止圖像部分420執(zhí)行縮小、剪輯等,以使靜止插補(bǔ)圖像F4a和輸入圖像F4的大小一致。
[0095]注意的是,靜止插補(bǔ)單元19可以基于靜止圖像部分420的性質(zhì),判定是執(zhí)行縮小還是剪輯。例如,當(dāng)靜止圖像部分420是單色(例如,黑色)的帶時,靜止插補(bǔ)單元19可以執(zhí)行縮小處理或剪輯處理。同時,當(dāng)在靜止圖像部分420上繪出某種圖案(字幕等)時,有利的是,靜止插補(bǔ)單元19執(zhí)行縮小處理。這是因?yàn)?,?dāng)執(zhí)行剪輯處理時,有可能丟失靜止圖像部分420的一部分信息。
[0096]接下來,將描述當(dāng)輸入圖像的靜止類型是“整個區(qū)域靜止”時執(zhí)行的處理的例子。在這個例子中,圖13中示出的輸入圖像F5被輸入到圖像處理裝置10。輸入圖像F5包括運(yùn)動圖像部分510和靜止圖像部分520。注意的是,運(yùn)動圖像部分510也被暫時停止。
[0097]如圖13中所示,靜止插補(bǔ)單元19將輸入圖像F5在χ方向和y方向上(在箭頭500的方向上)放大,以產(chǎn)生靜止插補(bǔ)圖像F5a。因此,在這種情況下,顯示倍率的χ分量和y分量都大于I。因此,靜止圖像部分520放大以變成經(jīng)放大靜止圖像部分520a,并且運(yùn)動圖像部分510放大以變成經(jīng)放大運(yùn)動圖像部分510a。注意的是,經(jīng)放大運(yùn)動圖像部分510a中的外邊緣部分510b超出輸入圖像F5,因此這個部分不能在顯示器上顯示。因此,如下所述,運(yùn)動插補(bǔ)單元20執(zhí)行非線性縮放,使得不形成外邊緣部分510b。以下將描述細(xì)節(jié)。靜止插補(bǔ)單元19將靜止插補(bǔ)圖像輸出到合成單元22。
[0098]注意的是,在圖13中示出的例子中,靜止插補(bǔ)單元19放大輸入圖像F5。然而,如果方向等確定單元17提供的改變信息指示輸入圖像的縮小,則靜止插補(bǔ)單元19縮小輸入圖像F5。在這種情況下,靜止插補(bǔ)圖像變得比輸入圖像小。因此,運(yùn)動插補(bǔ)單元20對運(yùn)動圖像部分應(yīng)用非線性縮放,以放大靜止插補(bǔ)圖像。以下將描述細(xì)節(jié)。
[0099]運(yùn)動插補(bǔ)單元20從存儲器11獲取當(dāng)前幀和先前幀和后續(xù)幀的輸入圖像,并且基于當(dāng)前幀和先前幀和后續(xù)幀的輸入圖像和運(yùn)動向量計(jì)算單元12和方向等確定單元17提供的信息,產(chǎn)生空白對應(yīng)部分或經(jīng)調(diào)節(jié)運(yùn)動圖像部分。
[0100]將基于圖8和圖10至圖13描述由運(yùn)動插補(bǔ)單元20進(jìn)行的處理的具體例子。首先,將描述當(dāng)輸入圖像是“運(yùn)動圖像”時執(zhí)行的處理的例子。在這個例子中,圖8中示出的輸入圖像F2 (η-1)至F2 (n+2)被輸入到圖像處理裝置10。另外,當(dāng)前幀是第η幀。在這個例子中,由靜止插補(bǔ)單元19將圓形圖像210在與三角形圖像220的運(yùn)動向量相同的方向上移動,并且形成空白部分210b。
[0101]這里,運(yùn)動插補(bǔ)單元20從構(gòu)成先前幀的輸入圖像的塊(特別是,從第一個塊)提取與空白部分210b對應(yīng)的空白對應(yīng)部分210c。具體地講,運(yùn)動插補(bǔ)單元20基于先前幀的每個塊的運(yùn)動向量,預(yù)測當(dāng)前幀中每個塊的位置。運(yùn)動插補(bǔ)單元20然后從先前幀中的各個塊之中,將被預(yù)測移動到當(dāng)前幀中的空白部分210b的塊識別為空白對應(yīng)部分210c。因此,運(yùn)動插補(bǔ)單元20提取空白對應(yīng)部分210c。
[0102]同時,當(dāng)將靜止圖像部分在與運(yùn)動向量相反的方向上移動時,運(yùn)動插補(bǔ)單元20從構(gòu)成后續(xù)幀的塊(具體地講,從第一個塊)中提取與空白部分對應(yīng)的空白對應(yīng)部分。具體地講,運(yùn)動插補(bǔ)單元20替換后續(xù)幀的運(yùn)動向量的符號以計(jì)算反向運(yùn)動向量,并且估計(jì)后續(xù)幀的各個塊存在于當(dāng)前幀中哪個位置。運(yùn)動插補(bǔ)單元20然后將被估計(jì)存在于當(dāng)前幀中的空白部分的那部分識別為空白對應(yīng)部分。因此,運(yùn)動插補(bǔ)單元20提取空白對應(yīng)部分210c。
[0103]接下來,將描述當(dāng)輸入圖像的靜止類型是“部分區(qū)域靜止”時執(zhí)行的處理的例子。在這個例子中,圖11中示出的輸入圖像F3被輸入到圖像處理裝置10。輸入圖像F3包括運(yùn)動圖像部分310和靜止圖像部分320。箭頭310a指示運(yùn)動圖像部分310的運(yùn)動向量。另外,由靜止插補(bǔ)單元19將靜止圖像部分320向上(在箭頭320a的方向上)移動,并且形成空白部分330。
[0104]在這種情況下,靜止圖像部分320的移動方向垂直于運(yùn)動向量,并且因此,可以不執(zhí)行基于運(yùn)動向量的插補(bǔ)。這是因?yàn)椋谙惹皫秃罄m(xù)幀中不存在空白對應(yīng)部分。因此,運(yùn)動插補(bǔ)單元20基于靜止圖像部分320對空白部分330進(jìn)行插補(bǔ)。具體地講,運(yùn)動插補(bǔ)單元20放大靜止圖像部分320,以產(chǎn)生與空白部分330對應(yīng)的空白對應(yīng)部分330a (縮放處理)。另外,運(yùn)動插補(bǔ)單元20可以將靜止圖像部分320中與空白部分330相鄰的那部分識別為空白對應(yīng)部分330a (重復(fù)處理)。在這種情況下,靜止圖像部分320的一部分被重復(fù)顯示。
[0105]注意的是,運(yùn)動插補(bǔ)單元20可以根據(jù)靜止圖像部分320的性質(zhì),確定執(zhí)行哪個處理。例如,當(dāng)靜止圖像部分320是單色(例如,黑色)的帶時,運(yùn)動插補(bǔ)單元20可以執(zhí)行縮放處理或重復(fù)處理。同時,當(dāng)在靜止圖像部分320上繪出某種圖案(字幕等)時,有利的是,運(yùn)動插補(bǔ)單元20執(zhí)行縮放處理。這是因?yàn)?,?dāng)執(zhí)行重復(fù)處理時,靜止圖像部分320的圖案可能在空白對應(yīng)部分330a中變成不連續(xù)的。另外,在這個例子中,因?yàn)殪o止圖像部分320被疊加在運(yùn)動圖像部分310的下端部分上,所以運(yùn)動插補(bǔ)單元20可以對運(yùn)動圖像部分310執(zhí)行縮小、剪輯等。
[0106]接下來,將描述當(dāng)輸入圖像的靜止類型是“部分區(qū)域靜止”時執(zhí)行的處理的另一個例子。在這個例子中,圖12中示出的輸入圖像F4被輸入到圖像處理裝置10。輸入圖像F4包括運(yùn)動圖像部分410和靜止圖像部分420。箭頭410a指示運(yùn)動圖像部分410的運(yùn)動向量。另外,由靜止插補(bǔ)單元19將靜止圖像部分420向下(在箭頭420a的方向上)移動,并且形成空白部分430。
[0107]在這個例子中,因?yàn)殪o止圖像部分420的移動方向是與運(yùn)動向量相同的方向,所以基于運(yùn)動向量的插補(bǔ)變得可能。具體地講,與圖10中示出的例子類似的插補(bǔ)是可能的。因此,運(yùn)動插補(bǔ)單元20從先前幀的輸入圖像提取空白對應(yīng)部分。
[0108]接下來,將描述當(dāng)輸入圖像的靜止類型是“整個區(qū)域靜止”時執(zhí)行的處理的例子。在這個例子中,圖13中示出的輸入圖像F5被輸入到圖像處理裝置10。輸入圖像F5包括運(yùn)動圖像部分510和靜止圖像部分520。然而,運(yùn)動圖像部分510也被暫時停止。另外,由靜止插補(bǔ)單元19將輸入圖像F5在xy方向上放大,并且外邊緣部分510b超出輸入圖像F5。
[0109]因此,運(yùn)動插補(bǔ)單元20將經(jīng)放大運(yùn)動圖像部分510a劃分成經(jīng)放大靜止圖像部分520a的周邊區(qū)域510a-l和外側(cè)區(qū)域510a_2,并且縮小外側(cè)區(qū)域510a_2 (在箭頭501的方向上縮小)。因此,運(yùn)動插補(bǔ)單元20產(chǎn)生經(jīng)調(diào)節(jié)運(yùn)動圖像部分510c。因此,運(yùn)動插補(bǔ)單元20對運(yùn)動圖像部分510執(zhí)行非線性縮放。下述的合成單元22用運(yùn)動圖像部分510c替代靜止插補(bǔ)圖像F5a的外側(cè)區(qū)域510a-2,以產(chǎn)生合成圖像。
[0110]注意的是,當(dāng)靜止插補(bǔ)單元19已縮小輸入圖像F5時,運(yùn)動插補(bǔ)單元20執(zhí)行放大外側(cè)區(qū)域510a-2的處理,以產(chǎn)生經(jīng)調(diào)節(jié)運(yùn)動圖像部分510c。當(dāng)存在多個靜止圖像部分時,運(yùn)動插補(bǔ)單元20可以執(zhí)行類似處理。也就是說,運(yùn)動插補(bǔ)單元20可以只放大(或縮小)每個靜止圖像部分的外圍區(qū)域,并且縮小(或放大)除了外圍區(qū)域之外的區(qū)域,也就是說,運(yùn)動圖像部分。
[0111]運(yùn)動插補(bǔ)單元20將與所產(chǎn)生的空白對應(yīng)部分或經(jīng)調(diào)節(jié)運(yùn)動圖像部分相關(guān)的運(yùn)動圖像插補(bǔ)信息輸出到合成單元22。
[0112]縮放插補(bǔ)單元21對運(yùn)動插補(bǔ)單元20還沒有進(jìn)行插補(bǔ)的空白部分執(zhí)行插補(bǔ)處理。也就是說,當(dāng)所有像素的運(yùn)動圖像部分的運(yùn)動在運(yùn)動圖像部分內(nèi)是平均的時候,通過運(yùn)動插補(bǔ)單元20進(jìn)行的處理對空白部分進(jìn)行插補(bǔ)。然而,在各個像素中,運(yùn)動圖像部分的運(yùn)動可以有所不同(可以無序化)。另外,運(yùn)動圖像部分可以按不規(guī)則方式移動。也就是說,當(dāng)運(yùn)動圖像部分在某個時間在給定方向上移動時,運(yùn)動圖像可以突然在特定幀改變運(yùn)動。在這些情況下,只是運(yùn)動插補(bǔ)單元20進(jìn)行的處理可能沒有完全對空白部分進(jìn)行插補(bǔ)。
[0113]另外,當(dāng)運(yùn)動圖像部分在改變其倍數(shù)的同時移動時(例如,當(dāng)運(yùn)動圖像部分在縮小的同時移動時),空白對應(yīng)部分的圖案和空白部分周圍的圖案可能不連接。
[0114]因此,首先,縮放插補(bǔ)單元21從存儲器11獲取當(dāng)前幀的輸入圖像,并且進(jìn)一步地,從靜止插補(bǔ)單元19和運(yùn)動插補(bǔ)單元20獲取靜止插補(bǔ)圖像和空白對應(yīng)部分。然后,縮放插補(bǔ)單元21將空白對應(yīng)部分疊加在空白部分上,以產(chǎn)生合成圖像。然后,縮放插補(bǔ)單元21判定是否在空白部分中形成間隙。當(dāng)形成間隙時,縮放插補(bǔ)單元21過濾和縮放空白對應(yīng)部分以填充間隙。
[0115]另外,當(dāng)空白對應(yīng)部分的圖案和空白部分周圍的圖案不連接時,縮放插補(bǔ)單元21在空白對應(yīng)部分和空白部分的周邊部分之間的邊界處執(zhí)行過濾處理,以將邊界模糊化。然后,縮放插補(bǔ)單元21將經(jīng)過上述處理調(diào)節(jié)的合成圖像(也就是說,經(jīng)調(diào)節(jié)圖像)輸出到合成單元22。
[0116]合成單元22將靜止插補(bǔ)圖像、空白對應(yīng)部分(或經(jīng)調(diào)節(jié)運(yùn)動圖像部分)和經(jīng)調(diào)節(jié)圖像組合,以產(chǎn)生合成圖像。圖11示出靜止插補(bǔ)圖像F3a和空白對應(yīng)部分330a的合成圖像F3b。另外,圖12示出靜止插補(bǔ)圖像F4a和空白對應(yīng)部分410b的合成圖像F4b。另外,圖13示出靜止插補(bǔ)圖像F5a和經(jīng)調(diào)節(jié)運(yùn)動圖像部分510c的合成圖像F5b。如這些例子中示出的,在合成圖像中,靜止圖像部分改變并且靜止圖像部分的周邊區(qū)域經(jīng)過某種方式的調(diào)節(jié)。合成單元22將合成圖像輸出到(例如)顯示器。顯示器顯示合成圖像。注意的是,因?yàn)轱@示器不必改變合成圖像的顯示位置,所以顯示器的元件數(shù)量是與合成圖像的像素數(shù)量近似的程度。
[0117]<4.由圖像處理裝置進(jìn)行的處理的過程〉
[0118]接下來,將參照圖7中示出的流程圖描述由圖像處理裝置10進(jìn)行的處理的過程。注意的是,如上所述,在運(yùn)動向量計(jì)算中,靜止圖像部分的周邊區(qū)域的塊變小,因此必須預(yù)先得知靜止圖像部分。
[0119]因此,首先,在步驟SI中,像素差計(jì)算單元13從存儲器11獲取當(dāng)前幀的輸入圖像、先前幀的輸入圖像和后續(xù)幀的輸入圖像。然后,像素差計(jì)算單元13將構(gòu)成當(dāng)前幀的像素與構(gòu)成后續(xù)幀和先前幀的像素進(jìn)行比較,以針對每個像素提取靜止圖像部分。具體地講,像素差計(jì)算單元13基于上述表達(dá)式(I)計(jì)算每個像素P(x,y)的亮度差值A(chǔ)PL。
[0120]像素差計(jì)算單元13產(chǎn)生與每個像素的亮度差值Λ PL相關(guān)的亮度差值信息,并且將該信息輸出到移動部分檢測單元14和靜止部分檢測單元15。
[0121]在步驟S2中,靜止部分檢測單元15判定是否存在場景變化,當(dāng)存在場景變化時前進(jìn)至步驟S3,并且當(dāng)場景沒有變化時前進(jìn)至步驟S4。注意的是,例如,可以由輸入圖像的輸出源的裝置告知是否存在場景變化。在步驟S3中,靜止部分檢測單元15刪除存儲器18中的靜止圖像信息。
[0122]在步驟S4中,靜止部分檢測單元15基于亮度差值信息從當(dāng)前幀的輸入圖像中檢測靜止圖像部分(靜止部分)。具體地講,靜止部分檢測單元15確定其中亮度差值小于預(yù)定參考差值的像素是靜止圖像部分。靜止部分檢測單元15產(chǎn)生指示構(gòu)成靜止圖像部分的像素的靜止圖像信息,并且將該信息輸出到運(yùn)動向量計(jì)算單元12和靜止類型確定單元16。注意的是,靜止部分檢測單元15將靜止圖像信息存儲在存儲器18中。
[0123]在步驟S5中,運(yùn)動向量計(jì)算單元12從存儲器11獲取當(dāng)前幀的輸入圖像和先前幀的輸入圖像。另外,運(yùn)動向量計(jì)算單元12從靜止部分檢測單元15獲取靜止圖像部分信息。
[0124]運(yùn)動向量計(jì)算單元12然后基于該信息以塊為單位計(jì)算當(dāng)前幀的輸入圖像的運(yùn)動向量。也就是說,運(yùn)動向量計(jì)算單元12從當(dāng)前幀中排除靜止圖像部分,并且將除了靜止圖像部分之外的區(qū)域劃分成多個塊。這里,運(yùn)動向量計(jì)算單元12將靜止圖像部分的周邊區(qū)域劃分成第一塊并且將除了周邊區(qū)域之外的區(qū)域劃分成第二塊。第一塊小于第二塊。也就是說,在詳細(xì)檢測靜止圖像部分的周邊區(qū)域的運(yùn)動的同時,運(yùn)動向量計(jì)算單元12粗略檢測與周邊區(qū)域相比是其它區(qū)域的運(yùn)動。
[0125]運(yùn)動向量計(jì)算單元12然后從存儲器11獲取先前幀的運(yùn)動向量信息,并且執(zhí)行塊匹配等,以計(jì)算當(dāng)前幀的塊的運(yùn)動向量。
[0126]運(yùn)動向量計(jì)算單元12將與每個塊的運(yùn)動向量相關(guān)的運(yùn)動向量信息輸出到移動部分檢測單元14、靜止部分檢測單元15、靜止插補(bǔ)單元19和運(yùn)動插補(bǔ)單元20。另外,運(yùn)動向量計(jì)算單元12將運(yùn)動向量信息存儲在存儲器11中。當(dāng)計(jì)算下一幀的運(yùn)動向量時,使用存儲器11中存儲的運(yùn)動向量信息。
[0127]在步驟S6中,移動部分檢測單元14基于運(yùn)動向量信息和亮度差值信息,從當(dāng)前幀的輸入圖像中檢測運(yùn)動圖像部分(移動部分)。具體地講,移動部分檢測單元14將其中亮度差值等于或大于預(yù)定參考差值的像素識別為運(yùn)動圖像部分。另外,當(dāng)運(yùn)動向量的絕對值(大小)大于或等于預(yù)定參考向量的大小時,移動部分檢測單元14將具有運(yùn)動向量的塊識別為運(yùn)動圖像部分。移動部分檢測單元14然后產(chǎn)生指示用作運(yùn)動圖像部分的塊的運(yùn)動圖像部分信息,并且將該信息輸出到靜止類型確定單元16。
[0128]在步驟S8中,靜止類型確定單元16基于運(yùn)動圖像部分信息和靜止圖像信息,確定輸入圖像的移動靜止類型。這里,在本實(shí)施方式中,靜止類型是“運(yùn)動圖像”、“部分區(qū)域靜止”和“整個區(qū)域靜止”中的任一種。靜止類型確定單元16然后將與判斷結(jié)果相關(guān)的靜止類型信息輸出到方向等確定單元17。
[0129]方向等確定單元17基于靜止類型信息等,確定靜止圖像部分的改變方法、改變方向和改變量。
[0130]也就是說,在步驟S9中,當(dāng)輸入圖像是“運(yùn)動圖像”時,方向等確定單元17確定改變方法是“移動”。這是因?yàn)?,如上所述,?dāng)靜止圖像部分移動時,形成空白部分,并且可以使用另一個幀的空白對應(yīng)部分對空白部分進(jìn)行插補(bǔ)。
[0131]同時,在步驟SlO中,當(dāng)輸入圖像是“部分區(qū)域靜止”時,方向等確定單元17確定改變方法是“移動”。在這種靜止類型中,由于靜止圖像部分的移動也造成空白部分,并且可以通過另一個幀的空白對應(yīng)部分或當(dāng)前幀的靜止圖像部分對空白部分進(jìn)行插補(bǔ)。
[0132]同時,在步驟Sll中,當(dāng)輸入圖像是“整個區(qū)域靜止”時,方向等確定單元17確定改變方法是“改變顯示倍率”。當(dāng)輸入圖像是“整個區(qū)域靜止”時,運(yùn)動圖像部分也被暫時停止。因此,沒有精確計(jì)算運(yùn)動圖像部分的運(yùn)動向量。因此,圖像處理裝置10不能基于運(yùn)動向量對由于靜止圖像部分的移動造成的空白部分進(jìn)行插補(bǔ)。因此,當(dāng)輸入圖像是“整個區(qū)域靜止”時,方向等確定單元17確定改變方法是“改變顯示倍率”。
[0133]在步驟S12中,方向等確定單元17確定靜止圖像部分的改變方向(移動方向)、改變量(移動量)和亮度。
[0134]具體地講,當(dāng)輸入圖像是“運(yùn)動圖像”時,方向等確定單元17基于改變方向的運(yùn)動向量確定靜止圖像部分的改變方向。也就是說,方向等確定單元17提取構(gòu)成靜止圖像部分的周邊區(qū)域的運(yùn)動圖像部分的運(yùn)動向量,并且計(jì)算運(yùn)動向量的算術(shù)平均值。方向等確定單元17然后確定靜止圖像部分的改變方向(也就是說,移動方向)是與運(yùn)動向量的算術(shù)平均值相同的方向或相反的方向。這里,方向等確定單元17從存儲器18獲取圖像劣化信息并且基于圖像劣化信息確定移動方向。
[0135]另外,方向等確定單元17基于運(yùn)動圖像部分的運(yùn)動向量,確定靜止圖像部分的改變量,即移動量。也就是說,方向等確定單元17提取構(gòu)成靜止圖像部分的周邊區(qū)域的運(yùn)動圖像部分的運(yùn)動向量,并且計(jì)算運(yùn)動向量的算術(shù)平均值。方向等確定單元17然后確定靜止圖像部分的移動量是與運(yùn)動向量的算術(shù)平均值相同的值。
[0136]另外,當(dāng)靜止圖像部分的亮度大于預(yù)定亮度時,方向等確定單元17可以確定亮度是小于或等于預(yù)定亮度的值。因此,可以可靠地減少烙印。可以不管輸入圖像的靜止類型而執(zhí)行這個處理。
[0137]同時,當(dāng)輸入圖像是“部分區(qū)域靜止”時,方向等確定單元17確定靜止圖像部分的改變方向(也就是說,移動方向)是X方向或y方向。具體地講,當(dāng)靜止圖像部分在橫跨X方向上的兩端之間的長度上形成時,方向等確定單元17確定改變方向是I方向。同時,當(dāng)靜止圖像部分在橫跨y方向上的兩端之間的長度上形成時,方向等確定單元17確定改變方向是X方向。這里,方向等確定單元17可以從存儲器18獲取圖像劣化信息并且基于圖像劣化信息確定移動方向。[0138]另外,方向等確定單元17基于運(yùn)動圖像部分的運(yùn)動向量,確定靜止圖像部分的改變量,即移動量。也就是說,方向等確定單元17提取構(gòu)成靜止圖像部分的周邊區(qū)域的運(yùn)動圖像部分的運(yùn)動向量,并且計(jì)算運(yùn)動向量的算術(shù)平均值。方向等確定單元17然后確定靜止圖像部分的移動量是與運(yùn)動向量的算術(shù)平均值相同的值。
[0139]同時,當(dāng)輸入圖像是“整個區(qū)域靜止”時,方向等確定單元17確定靜止圖像部分的改變方向和改變量,也就是說,顯示倍率的X分量和I分量。當(dāng)X分量大于I時,靜止圖像部分在X方向上被放大,并且當(dāng)X分量的值小于I時,靜止圖像部分在X方向上被縮小。對于I分量,同樣如此。這里,方向等確定單元17可以從存儲器18獲取圖像劣化信息并且基于圖像劣化信息確定顯示倍率的X分量和I分量。
[0140]方向等確定單元17將與改變方法、改變方向和改變量相關(guān)的改變信息輸出到靜止插補(bǔ)單元19、運(yùn)動插補(bǔ)單元20和縮放插補(bǔ)單元21。
[0141]在步驟S14中,運(yùn)動插補(bǔ)單元20從存儲器11獲取當(dāng)前幀和先前幀和后續(xù)幀的輸入圖像。運(yùn)動插補(bǔ)單元20然后基于當(dāng)前幀和先前幀和后續(xù)幀的輸入圖像和從運(yùn)動向量計(jì)算單元12和方向等確定單元17提供的信息,產(chǎn)生空白對應(yīng)部分或經(jīng)調(diào)節(jié)運(yùn)動圖像部分。運(yùn)動插補(bǔ)單元20然后將與空白對應(yīng)部分或經(jīng)調(diào)節(jié)運(yùn)動圖像部分相關(guān)的運(yùn)動圖像插補(bǔ)信息輸出到合成單元22。
[0142]同時,在步驟S15中,靜止插補(bǔ)單元19從存儲器11獲取當(dāng)前幀的輸入圖像,并且基于當(dāng)前幀的輸入圖像和從運(yùn)動向量計(jì)算單元12和方向等確定單元17提供的信息,產(chǎn)生靜止插補(bǔ)圖像。靜止插補(bǔ)單元19將靜止插補(bǔ)圖像輸出到合成單元22。
[0143]同時,在步驟S16中,縮放插補(bǔ)單元21對運(yùn)動插補(bǔ)單元20沒有進(jìn)行插補(bǔ)的空白部分進(jìn)行插補(bǔ)處理。也就是說,縮放插補(bǔ)單元21從存儲器11獲取當(dāng)前幀的輸入圖像,并且進(jìn)一步從靜止插補(bǔ)單元19和運(yùn)動插補(bǔ)單元20獲取靜止插補(bǔ)圖像和空白對應(yīng)部分??s放插補(bǔ)單元21然后將空白對應(yīng)部分疊加在空白部分上,以產(chǎn)生合成圖像??s放插補(bǔ)單元21然后判定在空白部分中是否形成間隙,并且過濾和縮放空白對應(yīng)部分以填充間隙。
[0144]另外,當(dāng)空白對應(yīng)部分的圖案和空白部分周圍的圖案不連接時,縮放插補(bǔ)單元21在空白對應(yīng)部分和空白部分的周邊部分之間的邊界處執(zhí)行過濾處理,以將邊界模糊化??s放插補(bǔ)單元21然后將經(jīng)過上述處理調(diào)節(jié)的合成圖像(也就是說,經(jīng)調(diào)節(jié)圖像)輸出到合成單元22。
[0145]在步驟S17中,合成單元22將靜止插補(bǔ)圖像、空白對應(yīng)部分(或經(jīng)調(diào)節(jié)運(yùn)動圖像部分)和經(jīng)調(diào)節(jié)圖像組合,以產(chǎn)生合成圖像。合成單元22將合成圖像輸出到(例如)顯示器。顯示器顯示合成圖像。
[0146]如上所述,根據(jù)本實(shí)施方式,圖像處理裝置10可以通過只移動輸入圖像內(nèi)的靜止圖像部分,保持整個輸入畫面的顯示位置固定。因此,用戶不太可能感到顯示位置已移動。例如,圖像處理裝置10可以只移動畫面角落處顯示的時鐘的符號。另外,因?yàn)榕c整個輸入圖像移動的情況相比,只有圖像處理裝置10的靜止圖像部分的一部分移動,所以用戶不太可能注意到靜止圖像部分的移動。因此,圖像處理裝置10可以增加靜止圖像部分的改變量,并且增加烙印的減少量。另外,因?yàn)閳D像處理裝置10可以基于圖像劣化信息計(jì)算靜止圖像部分的改變方向和改變量,所以在整個畫面內(nèi)元件的劣化可以是均一的,并且不平均性可以降低。[0147]更具體地講,圖像處理裝置10從輸入圖像提取靜止圖像部分,并且改變靜止圖像部分以產(chǎn)生合成圖像。圖像處理裝置10然后在顯示器上顯示合成圖像。因此,圖像處理裝置10可以在固定整個所顯示圖像的顯示位置之后改變靜止圖像部分。因此,用戶感到的煩惱和顯示器的烙印可以減少。另外,因?yàn)轱@示器的像素數(shù)量可以是與所顯示圖像的像素數(shù)量近似的程度,所以圖像處理裝置10可以減少顯示器的像素數(shù)量。也就是說,在整個所顯示圖像在顯示器的顯示畫面內(nèi)移動的技術(shù)中,必須在顯示器中準(zhǔn)備供所顯示圖像移動用的空白空間(用于進(jìn)行軌道處理的空白空間)。然而,在本實(shí)施方式中,準(zhǔn)備這種空白空間不是必須的。
[0148]另外,因?yàn)閳D像處理裝置10調(diào)節(jié)靜止圖像部分的周邊區(qū)域,所以靜止圖像部分的移動不容易被用戶注意到。另外,圖像處理裝置10可以產(chǎn)生減少用戶不適的合成圖像。
[0149]另外,因?yàn)閳D像處理裝置10基于移動區(qū)域調(diào)節(jié)靜止圖像部分的周邊區(qū)域,所以靜止圖像部分的移動可以不太能夠被用戶注意到。另外,圖像處理裝置10可以產(chǎn)生減少用戶不適的合成圖像。
[0150]另外,因?yàn)閳D像處理裝置10對由于靜止圖像部分改變造成的空白部分進(jìn)行插補(bǔ)以調(diào)節(jié)靜止圖像部分的周邊區(qū)域,所以靜止圖像部分的移動更不容易被用戶注意到。另外,圖像處理裝置10可以產(chǎn)生減少用戶不適的合成圖像。
[0151]另外,圖像處理裝置10從輸入圖像提取運(yùn)動圖像部分,并且基于運(yùn)動圖像部分對空白部分進(jìn)行插補(bǔ),從而產(chǎn)生減少用戶不適的合成圖像。
[0152]另外,圖像處理裝置10基于運(yùn)動圖像部分的運(yùn)動向量對空白部分進(jìn)行插補(bǔ),從而產(chǎn)生減少用戶不適的合成圖像。
[0153]另外,圖像處理裝置10基于運(yùn)動圖像部分的運(yùn)動向量,從另一個幀提取與空白部分對應(yīng)的空白對應(yīng)部分,并且將空白對應(yīng)部分疊加在空白部分上,以對空白部分進(jìn)行插補(bǔ)。因此,圖像處理裝置10可以產(chǎn)生減少用戶不適的合成圖像。
[0154]另外,圖像處理裝置10在與運(yùn)動圖像部分的運(yùn)動向量相同的方向上改變靜止圖像部分,并且基于運(yùn)動圖像部分的運(yùn)動向量從先前幀提取空白對應(yīng)部分。因此,圖像處理裝置10可以產(chǎn)生減少用戶不適的合成圖像。
[0155]另外,圖像處理裝置10在與運(yùn)動圖像部分的運(yùn)動向量相反的方向上改變靜止圖像部分,并且基于運(yùn)動圖像部分的運(yùn)動向量從后續(xù)幀提取空白對應(yīng)部分。因此,圖像處理裝置10可以產(chǎn)生減少用戶不適的合成圖像。
[0156]另外,圖像處理裝置10在與運(yùn)動圖像部分的運(yùn)動向量相交的方向上改變靜止圖像部分,并且基于當(dāng)前幀的靜止圖像部分對空白部分進(jìn)行插補(bǔ)。因此,圖像處理裝置10可以產(chǎn)生減少用戶不適的合成圖像。
[0157]另外,圖像處理裝置10基于運(yùn)動圖像部分的運(yùn)動向量的大小設(shè)置靜止圖像部分的改變量,從而產(chǎn)生減少用戶不適的合成圖像。
[0158]另外,圖像處理裝置10對運(yùn)動圖像部分應(yīng)用非線性縮放以調(diào)節(jié)靜止圖像部分的周邊區(qū)域,從而產(chǎn)生減少用戶不適的合成圖像。
[0159]另外,圖像處理裝置10比較構(gòu)成當(dāng)前幀的像素和構(gòu)成另一幀的像素以提取靜止圖像部分,從而更精確地提取靜止圖像部分。
[0160]另外,在以第一塊為單位從靜止圖像部分的周邊區(qū)域提取運(yùn)動圖像部分的同時,圖像處理裝置10以比第一塊大的第二塊為單位從與靜止圖像部分分開的分開區(qū)域提取運(yùn)動圖像部分。因此,圖像處理裝置10可以更精確地提取運(yùn)動圖像部分,并且可以更精確地對空白部分進(jìn)行插補(bǔ)。
[0161]另外,圖像處理裝置10基于輸入圖像(也就是說,顯示合成圖像的顯示元件的使用)改變靜止圖像部分,從而可靠地減少烙印。
[0162]如上所述,雖然已經(jīng)參照附圖描述了本發(fā)明的有利實(shí)施方式,但本發(fā)明的技術(shù)范圍不受這些實(shí)施方式限制。本領(lǐng)域的技術(shù)人員應(yīng)該理解,可以根據(jù)設(shè)計(jì)要求和其它因素,出現(xiàn)各種修改形式、組合形式、子組合形式和替代形式,使這些形式在所附權(quán)利要求書或其等同物的范圍內(nèi)。
[0163]本發(fā)明包含與2012年8月17日在日本專利局提交的日本優(yōu)先權(quán)專利申請JP2012-180833中公開的主題相關(guān)的主題,該專利申請的全部內(nèi)容特此以引用方式并入。
[0164]例如,雖然在上述實(shí)施方式中已經(jīng)通過示例性示出一些輸入圖像描述了本實(shí)施方式的處理,但輸入圖像不限于上述例子。
[0165]注意的是,以下的構(gòu)造也屬于本發(fā)明的技術(shù)范圍。
[0166](I) 一種圖像處理裝置,包括:
[0167]控制單元,被構(gòu)造為從輸入圖像提取靜止圖像部分,并且改變所述靜止圖像部分。
[0168](2)根據(jù)(I)所述的圖像處理裝置,其中所述控制單元調(diào)節(jié)所述靜止圖像部分的周邊區(qū)域。
[0169](3)根據(jù)(2)所述的圖像處理裝置,其中所述控制單元從所述輸入圖像提取運(yùn)動圖像部分,并且基于所述運(yùn)動圖像部分調(diào)節(jié)所述靜止圖像部分的周邊區(qū)域。
[0170](4)根據(jù)(3)所述的圖像處理裝置,其中所述控制單元基于所述運(yùn)動圖像部分對由于所述靜止圖像部分改變造成的空白部分進(jìn)行插補(bǔ)。
[0171](5)根據(jù)(4)所述的圖像處理裝置,其中所述控制單元基于所述運(yùn)動圖像部分的運(yùn)動向量對所述空白部分進(jìn)行插補(bǔ)。
[0172](6)根據(jù)(5)所述的圖像處理裝置,其中所述控制單元基于所述運(yùn)動圖像部分的運(yùn)動向量從另一幀提取與所述空白部分對應(yīng)的空白對應(yīng)部分,并且將所述空白對應(yīng)部分疊加在所述空白部分上,以對所述空白部分進(jìn)行插補(bǔ)。
[0173](7)根據(jù)(6)所述的圖像處理裝置,其中所述控制單元在與所述運(yùn)動圖像部分的運(yùn)動向量相同的方向上改變所述靜止圖像部分,并且基于所述運(yùn)動圖像部分的運(yùn)動向量從先前幀提取所述空白對應(yīng)部分。
[0174](8)根據(jù)(6)所述的圖像處理裝置,其中所述控制單元在與所述運(yùn)動圖像部分的運(yùn)動向量相反的方向上改變所述靜止圖像部分,并且基于所述運(yùn)動圖像部分的運(yùn)動向量從后續(xù)幀提取所述空白對應(yīng)部分。
[0175](9)根據(jù)(5)所述的圖像處理裝置,其中所述控制單元在與所述運(yùn)動圖像部分的運(yùn)動向量相交的方向上改變所述靜止圖像部分,并且基于當(dāng)前幀的靜止圖像部分對所述空白部分進(jìn)行插補(bǔ)。
[0176](10)根據(jù)(3)至(9)中任一項(xiàng)所述的圖像處理裝置,其中所述控制單元基于所述運(yùn)動圖像部分的運(yùn)動向量的大小,設(shè)置所述靜止圖像部分的改變量。
[0177](11)根據(jù)(3)至(9)中任一項(xiàng)所述的圖像處理裝置,其中所述控制單元對所述運(yùn)動圖像部分應(yīng)用非線性縮放,以調(diào)節(jié)所述靜止圖像部分的周邊區(qū)域。
[0178](12)根據(jù)(3)至(11)中任一項(xiàng)所述的圖像處理裝置,其中所述控制單元以第一塊為單位從所述靜止圖像部分的周邊區(qū)域提取運(yùn)動圖像部分,同時以第二塊為單位從與所述靜止圖像部分分開的分開區(qū)域提取所述運(yùn)動圖像部分,所述第二塊比所述第一塊寬。
[0179](13)根據(jù)(I)至(12)中任一項(xiàng)所述的圖像處理裝置,其中所述控制單元比較構(gòu)成當(dāng)前幀的像素和構(gòu)成另一幀的像素,以針對每個像素提取靜止圖像部分。
[0180](14)根據(jù)(I)至(13)中任一項(xiàng)所述的圖像處理裝置,其中所述控制單元基于顯示所述輸入圖像的元件的使用狀況,改變所述靜止圖像部分。
[0181](15) 一種圖像處理方法,包括:
[0182]從輸入圖像提取靜止圖像部分,以及
[0183]改變所述靜止圖像部分。
[0184](16) 一種致使計(jì)算機(jī)實(shí)現(xiàn)以下功能的程序:
[0185]控制功能,用于從輸入圖像提取靜止圖像部分并且改變所述靜止圖像部分。
[0186][參考標(biāo)號列表]
[0187]10圖像處理裝置
[0188]11存儲器
[0189]12運(yùn)動向量計(jì)算單元
[0190]13像素差計(jì)算單元
[0191]14移動部分檢測單元
[0192]15靜止部分檢測單元
[0193]16靜止類型確定單元
[0194]17方向等確定單元
[0195]18存儲器
[0196]19靜止插補(bǔ)單元
[0197]20運(yùn)動插補(bǔ)單元
[0198]21縮放插補(bǔ)單元
[0199]22合成單元
【權(quán)利要求】
1.一種圖像處理裝置,包括:控制單元,被構(gòu)造為從輸入圖像提取靜止圖像部分,并且改變所述靜止圖像部分。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置,其中所述控制單元調(diào)節(jié)所述靜止圖像部分的周邊區(qū)域。
3.根據(jù)權(quán)利要求2所述的圖像處理裝置,其中所述控制單元從所述輸入圖像提取運(yùn)動圖像部分,并且基于所述運(yùn)動圖像部分調(diào)節(jié)所述靜止圖像部分的周邊區(qū)域。
4.根據(jù)權(quán)利要求3所述的圖像處理裝置,其中所述控制單元基于所述運(yùn)動圖像部分對由于所述靜止圖像部分改變造成的空白部分進(jìn)行插補(bǔ)。
5.根據(jù)權(quán)利要求4所述的圖像處理裝置,其中所述控制單元基于所述運(yùn)動圖像部分的運(yùn)動向量對所述空白部分進(jìn)行插補(bǔ)。
6.根據(jù)權(quán)利要求5所述的圖像處理裝置,其中所述控制單元基于所述運(yùn)動圖像部分的運(yùn)動向量從另一幀提取與所述空白部分對應(yīng)的空白對應(yīng)部分,并且將所述空白對應(yīng)部分疊加在所述空白部分上,以對所述空白部分進(jìn)行插補(bǔ)。
7.根據(jù)權(quán)利要求6所述的圖像處理裝置,其中所述控制單元在與所述運(yùn)動圖像部分的運(yùn)動向量相同的方向上改變所述靜止圖像部分,并且基于所述運(yùn)動圖像部分的運(yùn)動向量從先前幀提取所述空白對應(yīng)部分。
8.根據(jù)權(quán)利要求6所述的圖像處理裝置,其中所述控制單元在與所述運(yùn)動圖像部分的運(yùn)動向量相反的方向上改變所述靜止圖像部分,并且基于所述運(yùn)動圖像部分的運(yùn)動向量從后續(xù)幀提取所述空白對應(yīng)部分。
9.根據(jù)權(quán)利要求5所述的圖像處理裝置,其中所述控制單元在與所述運(yùn)動圖像部分的運(yùn)動向量相交的方向上改變所述靜止圖像部分,并且基于當(dāng)前幀的靜止圖像部分對所述空白部分進(jìn)行插補(bǔ)。
10.根據(jù)權(quán)利要求3所述的圖像處理裝置,其中所述控制單元基于所述運(yùn)動圖像部分的運(yùn)動向量的大小,設(shè)置所述靜止圖像部分的改變量。
11.根據(jù)權(quán)利要求3所述的圖像處理裝置,其中所述控制單元對所述運(yùn)動圖像部分應(yīng)用非線性縮放,以調(diào)節(jié)所述靜止圖像部分的周邊區(qū)域。
12.根據(jù)權(quán)利要求3所述的圖像處理裝置,其中所述控制單元以第一塊為單位從所述靜止圖像部分的周邊區(qū)域提取運(yùn)動圖像部分,同時以第二塊為單位從與所述靜止圖像部分分開的分開區(qū)域提取所述運(yùn)動圖像部分,所述第二塊比所述第一塊寬。
13.根據(jù)權(quán)利要求1所述的圖像處理裝置,其中所述控制單元比較構(gòu)成當(dāng)前幀的像素和構(gòu)成另一幀的像素,以針對每個像素提取靜止圖像部分。
14.根據(jù)權(quán)利要求1所述的圖像處理裝置,其中所述控制單元基于顯示所述輸入圖像的元件的使用狀況,改變所述靜止圖像部分。
15.—種圖像處理方法,包括:從輸入圖像提取靜止圖像部分,以及改變所述靜止圖像部分。
16.一種致使計(jì)算機(jī)實(shí)現(xiàn)以下功能的程序:控制功能,用于從輸入圖像提取靜止圖像部分并且改變所述靜止圖像部分。
【文檔編號】G09G5/20GK103595897SQ201310345047
【公開日】2014年2月19日 申請日期:2013年8月9日 優(yōu)先權(quán)日:2012年8月17日
【發(fā)明者】須藤信幸 申請人:索尼公司