圖像處理裝置和方法
【專利摘要】本公開涉及一種圖像處理裝置和方法，該裝置和方法使得能夠在輸入為隔行信號(hào)的情況下在對運(yùn)動(dòng)向量進(jìn)行編碼或解碼時(shí)提高編碼效率。當(dāng)前PU和關(guān)于當(dāng)前PU的運(yùn)動(dòng)向量信息參考的參考PU屬于頂場。與之相比，同位PU屬于頂場，而關(guān)于同位PU的運(yùn)動(dòng)向量信息參考的參考PU屬于底場，使得在場之間發(fā)生相位移位。因此，奇偶性調(diào)整單元對關(guān)于同位PU的運(yùn)動(dòng)向量信息的垂直分量進(jìn)行-1/2移位調(diào)整，如虛線箭頭所示。本公開可應(yīng)用于例如圖像處理裝置。
【專利說明】圖像處理裝置和方法
【技術(shù)領(lǐng)域】
[0001]本公開涉及圖像處理裝置和方法，并且更具體地涉及能夠在輸入為隔行(interlaced)信號(hào)的情況下在對運(yùn)動(dòng)向量進(jìn)行編碼或解碼時(shí)提高編碼效率的圖像處理裝置和方法。
【背景技術(shù)】
[0002]近年來，通過實(shí)現(xiàn)如下編碼方法來壓縮圖像的設(shè)備不斷普及以處理作為數(shù)字信息的圖像信息并且這樣做實(shí)現(xiàn)高效信息傳輸和累積:該編碼方法用于經(jīng)由通過使用對圖像信息固有的冗余性的正交變換(諸如，離散余弦變換)和運(yùn)動(dòng)補(bǔ)償來壓縮圖像信息。例如，該編碼方法可以是MPEG(運(yùn)動(dòng)圖片專家組)等。
[0003]具體地，MPEG2(IS0/IEC13818-2)被定義為通用圖像編碼標(biāo)準(zhǔn)，并且可應(yīng)用于隔行圖像與非隔行圖像、以及標(biāo)準(zhǔn)分辨率圖像與高清晰度圖像。例如，MPEG2現(xiàn)在廣泛用于針對專業(yè)和通常消費(fèi)者的廣范圍的應(yīng)用。例如，通過使用MPEG2壓縮方法，對具有720 X 480像素的標(biāo)準(zhǔn)分辨率隔行圖像，分配4Mbps至8Mbps的位速率。另外，例如，通過使用MPEG2壓縮方法，對具有1920X1088像素的高分辨率隔行圖像，分配18Mbps至22Mbps的位速率。以此方式，可以實(shí)現(xiàn)高壓縮率和出色的圖像質(zhì)量。
[0004]MPEG2主要被設(shè)計(jì)用于適合于進(jìn)行廣播的高質(zhì)量圖像編碼，但是與相比于MPEGl更低的位速率或涉及更高壓縮率的編碼方法不兼容。隨著移動(dòng)終端變得普及，預(yù)期對于這樣的編碼方法的需求在將來會(huì)增長，并且為了滿足該需求，已對MPEG4編碼方法進(jìn)行標(biāo)準(zhǔn)化。關(guān)于圖像編碼方法，在1998年12月批準(zhǔn)IS0/IEC14496-2標(biāo)準(zhǔn)作為國際標(biāo)準(zhǔn)。
[0005]在標(biāo)準(zhǔn)化的時(shí)間表中，該標(biāo)準(zhǔn)被批準(zhǔn)為以2003年3月，使H.264和MPEG-4第10部分(高級視頻編碼，下文中稱為AVC)命名的國際標(biāo)準(zhǔn)。
[0006]作為AVC的擴(kuò)展，在2005年2月將FRExt (保真度范圍擴(kuò)展)標(biāo)準(zhǔn)化。FRExt包括諸如RGB、4:2:2、4:4:4的用于產(chǎn)業(yè)使用的編碼工具以及在MPEG-2中所規(guī)定的8x8DCT和量化矩陣。結(jié)果，通過使用AVC來實(shí)現(xiàn)用于使得出色表達(dá)包含膠片噪聲(film noise)的電影的編碼方法，并且現(xiàn)在該編碼方法用于諸如藍(lán)光盤(商標(biāo))的廣范圍的應(yīng)用。
[0007]然而，對于以較高壓縮率進(jìn)行編碼的需求不斷增長，以對具有比高清晰度圖像分辨率高四倍的約4000X2000像素的分辨率的圖像進(jìn)行壓縮、或在如因特網(wǎng)那樣傳輸容量受限的當(dāng)前環(huán)境中分發(fā)高清晰度圖像。因此，通過ITU-T下的VCEG(視頻編碼專家組)仍連續(xù)關(guān)于編碼效率的改進(jìn)的研究。
[0008]作為用于使用根據(jù)AVC的中值預(yù)測來改進(jìn)運(yùn)動(dòng)向量編碼的編碼效率改進(jìn)措施之一，已提出了除了使用在AVC中所定義的且通過中值預(yù)測確定的“空間預(yù)測值”之外還自適應(yīng)使用“時(shí)間預(yù)測值”或“時(shí)空預(yù)測值”作為預(yù)測運(yùn)動(dòng)向量信息的技術(shù)(下文中，也稱為“MV競爭(MVCompetition) ” )(例如，參見非專利文獻(xiàn)I)。
[0009]根據(jù)AVC，當(dāng)選擇了預(yù)測運(yùn)動(dòng)向量信息時(shí)，使用在被稱為JM(聯(lián)合模型)的AVC相符合的參考軟件中所編程的高復(fù)雜度模式或低復(fù)雜度模式下計(jì)算的成本函數(shù)值。[0010]具體地，通過使用預(yù)測運(yùn)動(dòng)向量信息計(jì)算成本函數(shù)值，并且選擇最佳預(yù)測運(yùn)動(dòng)向量信息。通過壓縮圖像信息，針對每個(gè)塊傳送表示關(guān)于已使用哪個(gè)預(yù)測運(yùn)動(dòng)向量信息的信息的標(biāo)記信息。
[0011]同時(shí)，16像素X 16像素的宏塊大小對于下一代編碼方法要編碼的諸如UHD(超高清晰度:4000X2000像素)的大的幀而言可能不是最佳的。
[0012]鑒于此，并且為了實(shí)現(xiàn)比AVC所實(shí)現(xiàn)的編碼效率更高的編碼效率的目的，現(xiàn)在通過作為ITU-T與IS0/IEC的聯(lián)合標(biāo)準(zhǔn)組織的JCTVC(聯(lián)合協(xié)作組-視頻編碼)對被稱為HEVC (高效視頻編碼)的編碼方法標(biāo)準(zhǔn)化(例如，參見非專利文獻(xiàn)2)。
[0013]根據(jù)HEVC，將編碼單位(⑶(Coding Unit))定義為類似于AVC的宏塊的處理單位。不同于AVC的宏塊，該CU并不固定為16X16像素的大小。在每個(gè)序列中，在壓縮圖像信息中指定CU的大小。在每個(gè)序列中，還指定了 CU的最大大小(LCU =最大編碼單位)和最小大小(SCU=最小編碼單位)。
[0014]作為運(yùn)動(dòng)信息編碼方法之一，還提出了被稱作運(yùn)動(dòng)分區(qū)合并(下文中還稱作合并模式(Merge Mode))的技術(shù)(例如，參見非專利文獻(xiàn)3)。通過該技術(shù)，當(dāng)關(guān)于當(dāng)前塊的運(yùn)動(dòng)信息與關(guān)于鄰近塊的運(yùn)動(dòng)信息相同時(shí)，僅傳送標(biāo)記信息，并且在解碼時(shí)，通過使用關(guān)于鄰近塊的運(yùn)動(dòng)信息來重構(gòu)關(guān)于當(dāng)前塊的運(yùn)動(dòng)信息。
[0015]即，在合并模式下，還可以根據(jù)鄰近塊確定空間預(yù)測值(空間預(yù)測運(yùn)動(dòng)向量)和時(shí)間預(yù)測值(時(shí)間預(yù)測運(yùn)動(dòng)向量)，并且從這些運(yùn)動(dòng)向量中選擇最佳預(yù)測運(yùn)動(dòng)向量。在合并模式下，僅當(dāng)所確定的預(yù)測運(yùn)動(dòng)向量與關(guān)于當(dāng)前塊的運(yùn)動(dòng)信息相同時(shí)，傳送標(biāo)記信息。 [0016]根據(jù)AVC，當(dāng)要輸入的圖像為隔行信號(hào)時(shí)，可以針對每個(gè)圖片或每個(gè)宏塊對選擇幀編碼或場編碼。在隔行信號(hào)中，幀或每個(gè)宏塊由具有不同奇偶性(頂和底)的頂場和底場交替地形成。
[0017]場編碼是對由頂場和底場形成的每個(gè)場進(jìn)行編碼的方法，并且?guī)幋a是對未通過奇偶性分離的頂場和底場進(jìn)行編碼的方法。
[0018]引用列表
[0019]非專利文獻(xiàn)
[0020]非專利文獻(xiàn)1:Joel Jung, Guillaume Laroche, ^Competition-BasedScheme for Motion Vector Selection and Coding"，VCEG-AC06， ITU-Telecommunications Standardization SectorSTUDY GROUP16Question6Video Coding ExpertsGroup (VCEG)29th Meeting:Klagenfurt, Austria, 17_18July，2006
[0021]非專利文獻(xiàn)2:Thomas Wiegandj Woo-Jin Han，Benjamin Brossj Jens-RainerOhm, Gary J.Sullivan，"Working Draft4of High-Efficiency VideoCoding"，JCTVC-F803，Joint Collaborative Team on Video Coding(JCT-VC)of ITU-TSG16WP3and IS0/IEC JTCl/SC29/WG116th Meeting:Torino, IT, 14_22July，2011
[0022]非專利文獻(xiàn)3:Martin Winkenj Sebastian Bosse，Benjamin Brossj PhilippHellej Tobias HinzjHeiner KirchhofferjHaricharan LakshmanjDetlev Marpej SimonOudinj Matthias PreissjHeiko Schwarz, Mischa SiekmannjKarsten Suehringj andThomas Wiegandj"Description of video coding technology proposed by FraunhoferHHI"，JCTVC-Al16, April, 2010
【發(fā)明內(nèi)容】

[0023]本發(fā)明要解決的問題
[0024]針對隔行信號(hào)的上述功能可以應(yīng)用于HEVC。然而，當(dāng)將通過上述MV競爭或合并模式生成的時(shí)間預(yù)測運(yùn)動(dòng)向量應(yīng)用于隔行信號(hào)的輸入時(shí)，在一些情況下在不同奇偶性之間生成時(shí)間預(yù)測運(yùn)動(dòng)向量。
[0025]由于在不同奇偶性之間存在垂直分量的相位移位，所以當(dāng)在不同奇偶性之間生成時(shí)間預(yù)測運(yùn)動(dòng)向量時(shí)，編碼效率可能變低。
[0026]鑒于這些情況作出本公開內(nèi)容，并且本公開的目的是在輸入為隔行信號(hào)的情況下對運(yùn)動(dòng)向量進(jìn)行編碼或解碼時(shí)提高編碼效率。
[0027]針對問題的解決方案
[0028]本公開的一方面的圖像處理裝置包括:預(yù)測運(yùn)動(dòng)向量生成單元，其通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量；奇偶性調(diào)整單元，其根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整；以及運(yùn)動(dòng)向量解碼單元，其通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的所述運(yùn)動(dòng)向量進(jìn)行解碼。
[0029]當(dāng)由所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系指示的相移不同于由所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系指示的相移時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整。
[0030]當(dāng)由所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系指示的相移和由所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系指示的相移相反時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行I或-1移位調(diào)整。
[0031]當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系為“BT”而所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系為“TB”時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行I移位調(diào)整。
[0032]當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系以及所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系中只有一個(gè)奇偶性關(guān)系指示相移、而另一個(gè)所述奇偶性關(guān)系指示沒有相移時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行1/2或-1/2移位調(diào)整。
[0033]當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系為“TT”而所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系為“BT”時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行1/2移位調(diào)整。
[0034]所述運(yùn)動(dòng)向量解碼單元可以基于高級運(yùn)動(dòng)向量預(yù)測，通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼。
[0035]所述運(yùn)動(dòng)向量解碼單元可以基于運(yùn)動(dòng)分區(qū)合并，通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼。
[0036]本公開的一方面的一種圖像處理方法包括:通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量；根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所生成的時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整；以及通過使用垂直分量經(jīng)過所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼，圖像處理裝置生成所述時(shí)間預(yù)測運(yùn)動(dòng)向量，進(jìn)行所述移位調(diào)整，并且對所述當(dāng)前區(qū)域的所述運(yùn)動(dòng)向量進(jìn)行解碼。
[0037]本公開的另一方面的一種圖像處理裝置包括:預(yù)測運(yùn)動(dòng)向量生成單元，其通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量；奇偶性調(diào)整單元，其根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整；以及運(yùn)動(dòng)向量編碼單元，其通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元進(jìn)行的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼。
[0038]當(dāng)由所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系指示的相移不同于由所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系指示的相移時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整。
[0039]當(dāng)由所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系指示的相移和由所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系指示的相移相反時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行I或-1移位調(diào)整。
[0040]當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系為“BT”而所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系為“TB”時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行I移位調(diào)整。
[0041]當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系以及所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系中只有一個(gè)奇偶性關(guān)系指示相移、而另一個(gè)所述奇偶性關(guān)系指示沒有相移時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行1/2或-1/2移位調(diào)整。
[0042]當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系為“TT”而所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系為“BT”時(shí)，所述奇偶性調(diào)整單元可以對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行1/2移位調(diào)整。
[0043]所述運(yùn)動(dòng)向量編碼單元可以基于高級運(yùn)動(dòng)向量預(yù)測，通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼。
[0044]所述運(yùn)動(dòng)向量編碼單元可以基于運(yùn)動(dòng)分區(qū)合并，通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元進(jìn)行的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼。
[0045]本公開的另一方面的一種圖像處理方法包括:通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量；根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所生成的時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整；以及通過使用垂直分量經(jīng)過所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼，圖像處理裝置生成所述時(shí)間預(yù)測運(yùn)動(dòng)向量，進(jìn)行所述移位調(diào)整，并且對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼。
[0046]在本公開的一方面，通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量。根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所生成的時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整。然后，通過使用垂直分量經(jīng)過所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼。
[0047]在本公開的另一方面，通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量。根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所生成的時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整。然后，通過使用垂直分量經(jīng)過所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼。
[0048]上述圖像處理裝置中的每個(gè)可以是獨(dú)立的裝置，或可以是形成圖像編碼裝置或圖像解碼裝置的內(nèi)部塊。
[0049]本發(fā)明的效果
[0050]根據(jù)本公開的一方面，可以對圖像進(jìn)行解碼。具體地，可以在輸入為隔行信號(hào)的情況下對運(yùn)動(dòng)向量進(jìn)行編碼或解碼時(shí)提高編碼效率。
[0051]根據(jù)本公開的另一方面，可以對圖像進(jìn)行編碼。具體地，可以在輸入為隔行信號(hào)的情況下對運(yùn)動(dòng)向量進(jìn)行編碼或解碼時(shí)提高編碼效率。
【專利附圖】

【附圖說明】
[0052]圖1是示出了圖像編碼裝置的典型示例結(jié)構(gòu)的框圖。
[0053]圖2是示出了分?jǐn)?shù)像素精度的示例運(yùn)動(dòng)預(yù)測/補(bǔ)償處理的圖。
[0054]圖3是示出了示例宏塊的圖。[0055]圖4是用于說明中值運(yùn)算的圖。
[0056]圖5是用于說明多參考巾貞(Mult1-Reference Frame)的圖。
[0057]圖6是用于說明時(shí)間直接模式(Temporal Direct Mode)的圖。
[0058]圖7是用于說明運(yùn)動(dòng)向量編碼方法的圖。
[0059]圖8是用于說明編碼單位(Coding Unit)的示例結(jié)構(gòu)的圖。
[0060]圖9是用于說明運(yùn)動(dòng)分區(qū)合并(Motion Partition Merging)的圖。
[0061]圖10是示出了以圖片為基礎(chǔ)的隔行信號(hào)編碼的示例的圖。
[0062]圖11是以宏塊對為基礎(chǔ)的隔行信號(hào)編碼的示例的圖。
[0063]圖12是示出了根據(jù)本技術(shù)的奇偶性調(diào)整方法的示例的圖。
[0064]圖13是示出了根據(jù)本技術(shù)的奇偶性調(diào)整方法的另一示例的圖。
[0065]圖14是示出了根據(jù)本技術(shù)的奇偶性調(diào)整方法的又一示例的圖。
[0066]圖15是示出了奇偶性調(diào)整方法的所有示例的圖。
[0067]圖16是示出了運(yùn)動(dòng)向量編碼單元和奇偶性調(diào)整單元的典型示例結(jié)構(gòu)的框圖。
[0068]圖17是用于說明編碼處理的示例流程的流程圖。
[0069]圖18是用于說明幀間運(yùn)動(dòng)預(yù)測處理的示例流程的流程圖。
[0070]圖19是用于說明預(yù)測運(yùn)動(dòng)向量生成處理的示例流程的流程圖。
[0071]圖20是示出了圖像解碼裝置的典型示例結(jié)構(gòu)的框圖。
[0072]圖21是示出了運(yùn)動(dòng)向量解碼單元和奇偶性調(diào)整單元的典型示例結(jié)構(gòu)的框圖。
[0073]圖22是用于說明解碼處理的示例流程的流程圖。
[0074]圖23是用于說明運(yùn)動(dòng)向量重構(gòu)處理的示例流程的流程圖。
[0075]圖24是用于說明本技術(shù)到多視圖圖像的應(yīng)用的圖。
[0076]圖25是示出了計(jì)算機(jī)的典型示例結(jié)構(gòu)的框圖。
[0077]圖26是示意性示出了電視設(shè)備的示例結(jié)構(gòu)的框圖。
[0078]圖27是示意性示出了便攜式電話裝置的示例結(jié)構(gòu)的框圖。
[0079]圖28是示意性示出了記錄/再現(xiàn)設(shè)備的示例結(jié)構(gòu)的框圖。
[0080]圖29是示意性示出了成像設(shè)備的示例結(jié)構(gòu)的框圖。
【具體實(shí)施方式】
[0081]下面將描述用于實(shí)現(xiàn)本公開的模式(下文中稱為實(shí)施例)。將按照以下順序進(jìn)行說明。
[0082]1.第一實(shí)施例(圖像編碼裝置)
[0083]2.第二實(shí)施例(圖像解碼裝置)
[0084]3.第三實(shí)施例(計(jì)算機(jī))
[0085]4.示例應(yīng)用
[0086]〈1.第一實(shí)施例>
[0087][圖像編碼裝置]
[0088]圖1是示出了圖像編碼裝置的典型示例結(jié)構(gòu)的框圖。
[0089]圖1所示的圖像編碼裝置100通過使用例如根據(jù)HEVC (高效視頻編碼)的預(yù)測處理對圖像數(shù)據(jù)進(jìn)行編碼。[0090]如圖1所示，圖像編碼裝置100包括A/D轉(zhuǎn)換器101、屏幕重排緩沖器102、算術(shù)運(yùn)算單元103、正交變換單元104、量化單元105、無損編碼單元106、累積緩沖器107、逆量化單元108、以及逆正交變換單元109。圖像編碼裝置100還包括算術(shù)運(yùn)算單元110、去塊濾波器
111、幀存儲(chǔ)器112、選擇單元113、幀內(nèi)預(yù)測單元114、運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115、預(yù)測圖像選擇單元116、以及速率控制單元117。
[0091]圖像編碼裝置100還包括運(yùn)動(dòng)向量編碼單元121和奇偶性調(diào)整單元122。
[0092]A/D轉(zhuǎn)換器101對輸入圖像數(shù)據(jù)進(jìn)行A/D轉(zhuǎn)換，并將轉(zhuǎn)換后的圖像數(shù)據(jù)(數(shù)字?jǐn)?shù)據(jù))提供并存儲(chǔ)到屏幕重排緩沖器102。屏幕重排緩沖器102對具有根據(jù)GOP (圖片組)結(jié)構(gòu)按照顯示順序存儲(chǔ)的幀的圖像進(jìn)行重排，使得幀被排列為用于編碼的幀順序。將具有重排的幀的圖像提供給算術(shù)運(yùn)算單元103。屏幕重排緩沖器102還將具有重排的幀順序的圖像提供給幀內(nèi)預(yù)測單元114和運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115。
[0093]算術(shù)運(yùn)算單元103從自屏幕重排緩沖器102讀取的圖像中減去經(jīng)由預(yù)測圖像選擇單元116從幀內(nèi)預(yù)測單元114或運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115提供的預(yù)測圖像，并將差信息輸出到正交變換單元104。
[0094]當(dāng)例如對圖像執(zhí)行幀間編碼時(shí)，算術(shù)運(yùn)算單元103從自屏幕重排緩沖器102讀取的圖像中減去從運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115提供的預(yù)測圖像。
[0095]正交變換單元104對從算術(shù)運(yùn)算單元103提供的差信息執(zhí)行正交變換，諸如離散余弦變換或卡洛(Karhunen-Loeve)變換。該正交變換是通過任何適當(dāng)?shù)姆椒ㄟM(jìn)行的。正交變換單元104將變換系數(shù)提供給量化單元105。
[0096]量化單元105對從正交變換單元104提供的變換系數(shù)進(jìn)行量化?；趶乃俾士刂茊卧?17提供的目標(biāo)位速率信息，量化單元105設(shè)置量化參數(shù)，并進(jìn)行量化。該量化是通過任何適當(dāng)?shù)姆椒ㄟM(jìn)行的。量化單元105將量化后的變換系數(shù)提供給無損編碼單元106。
[0097]無損編碼單元106通過適當(dāng)?shù)木幋a方法對量化單元105量化的變換系數(shù)進(jìn)行編碼。由于已經(jīng)在速率控制單元117的控制下將系數(shù)數(shù)據(jù)量化，所以位速率變得等于速率控制單元117所設(shè)置的目標(biāo)值(或近似于該目標(biāo)值)。
[0098]無損編碼單元106還從幀內(nèi)預(yù)測單元114獲取指示幀內(nèi)預(yù)測模式的信息等，并從運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115獲取指示幀間預(yù)測模式的信息、差運(yùn)動(dòng)向量信息等。
[0099]無損編碼單元106通過適當(dāng)?shù)木幋a方法對這些各種信息進(jìn)行編碼，并將該信息并入編碼數(shù)據(jù)(也被稱為編碼流)的頭信息中(或?qū)⒃撔畔⑴c編碼數(shù)據(jù)的頭信息復(fù)用)。無損編碼單元106將通過編碼獲得的編碼數(shù)據(jù)提供并存儲(chǔ)到累積緩沖器107。
[0100]無損編碼單元106使用的編碼方法例如可以是可變長度編碼或算術(shù)編碼?？勺冮L度編碼例如可以是AVC中規(guī)定的CAVLC(上下文自適應(yīng)可變長度編碼，Context-AdaptiveVariable Length Coding)。算術(shù)編碼例如可以是CABAC(上下文自適應(yīng)二進(jìn)制算術(shù)編碼，Context-Adaptive Binary Arithmetic Coding)。
[0101]累積緩沖器107臨時(shí)保存從無損編碼單元106提供的編碼數(shù)據(jù)。在預(yù)定時(shí)間處，累積緩沖器107將保存在其中的編碼數(shù)據(jù)輸出至例如后續(xù)級中的記錄裝置(記錄介質(zhì))或傳輸路徑等(未示出)。即，累積緩沖器107還用作傳送編碼數(shù)據(jù)的傳送單元。
[0102]還將經(jīng)量化單元105量化的變換系數(shù)提供給逆量化單元108。逆量化單元108通過與量化單元105進(jìn)行的量化相符合的方法來對量化后的變換系數(shù)進(jìn)行逆量化。逆量化的方法可以是任意方法，只要該方法與量化單元105進(jìn)行的量化處理相符合。逆量化單元108將所獲得的變換系數(shù)提供給逆正交變換單元109。
[0103]逆正交變換單元109通過與正交變換單元104進(jìn)行的正交變換處理相符合的方法來對從逆量化單元108提供的變換系數(shù)執(zhí)行逆正交變換。該逆正交變換可以通過任意方法來進(jìn)行，只要該方法與正交變換單元104進(jìn)行的正交變換處理相符合。將進(jìn)行了逆正交變換的輸出(所恢復(fù)的差信息)提供給算術(shù)運(yùn)算單元110。
[0104]算術(shù)運(yùn)算單元110通過將經(jīng)由預(yù)測圖像選擇單元116從幀內(nèi)預(yù)測單元114或運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115提供的預(yù)測圖像與作為從逆正交變換單元109提供的逆正交變換結(jié)果的所恢復(fù)的差信息相加，來獲得局部解碼圖像(解碼圖像)。將該解碼圖像提供給去塊濾波器111或幀存儲(chǔ)器112。
[0105]去塊濾波器111適當(dāng)?shù)貙乃阈g(shù)運(yùn)算單元110提供的解碼圖像執(zhí)行去塊濾波處理。例如，去塊濾波器111通過對解碼圖像執(zhí)行去塊濾波處理，從解碼圖像去除塊失真。
[0106]去塊濾波器111將濾波處理結(jié)果(進(jìn)行了濾波處理的解碼圖像)提供給幀存儲(chǔ)器
112。如上所述，從算術(shù)運(yùn)算單元110輸出的解碼圖像可提供給幀存儲(chǔ)器112，而不通過去塊濾波器111。S卩，可跳過去塊濾波器111進(jìn)行的濾波處理。
[0107]幀存儲(chǔ)器112存儲(chǔ)所提供的解碼圖像，并且在預(yù)定時(shí)間處，將所存儲(chǔ)的解碼圖像作為參考圖像提供給選擇單元113。
[0108]選擇單元113選擇從幀存儲(chǔ)器112提供的參考圖像的供應(yīng)目的地。例如，在幀間預(yù)測的情況下，選擇單元113將從幀存儲(chǔ)器112提供的參考圖像提供給運(yùn)動(dòng)預(yù)測/補(bǔ)償單元 115。
[0109]幀內(nèi)預(yù)測單元114通過使用作為經(jīng)由選擇單元113從幀存儲(chǔ)器112提供的參考圖像的當(dāng)前圖片中的像素值，來執(zhí)行幀內(nèi)預(yù)測(屏幕內(nèi)預(yù)測)以生成預(yù)測圖像。在生成預(yù)測圖像時(shí)，預(yù)測單位(PU)基本上用作處理單位。幀內(nèi)預(yù)測單元114以預(yù)先準(zhǔn)備的多于一個(gè)的幀內(nèi)預(yù)測模式來執(zhí)行幀內(nèi)預(yù)測。
[0110]幀內(nèi)預(yù)測單元114在所有候選幀內(nèi)預(yù)測模式下生成預(yù)測圖像，通過使用從屏幕重排緩沖器102提供的輸入圖像來評估各預(yù)測圖像的成本函數(shù)值，并選擇最佳模式。在選擇最佳幀內(nèi)預(yù)測模式之后，幀內(nèi)預(yù)測單元114將在最佳幀內(nèi)預(yù)測模式下生成的預(yù)測圖像提供給預(yù)測圖像選擇單元116。
[0111]如上所述，幀內(nèi)預(yù)測單元114適當(dāng)?shù)剡€將表示所采用的幀內(nèi)預(yù)測模式的幀內(nèi)預(yù)測模式信息提供給無損編碼單元106，以對幀內(nèi)預(yù)測模式信息進(jìn)行編碼。
[0112]運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115使用從屏幕重排緩沖器102提供的輸入圖像和經(jīng)由選擇單元113從幀存儲(chǔ)器112提供的參考圖像，基本上采用作為處理單位來執(zhí)行運(yùn)動(dòng)預(yù)測(幀間預(yù)測)。運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115將所檢測到的運(yùn)動(dòng)向量提供給運(yùn)動(dòng)向量編碼單元121，并根據(jù)所檢測到的運(yùn)動(dòng)向量執(zhí)行運(yùn)動(dòng)補(bǔ)償處理，從而生成預(yù)測圖像(幀間預(yù)測圖像信息)。運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115以預(yù)先準(zhǔn)備的多于一個(gè)的幀間預(yù)測模式執(zhí)行這樣的幀間預(yù)測。
[0113]運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115生成差運(yùn)動(dòng)向量，該差運(yùn)動(dòng)向量是當(dāng)前區(qū)域的運(yùn)動(dòng)向量與從運(yùn)動(dòng)向量編碼單元121提供的當(dāng)前區(qū)域的預(yù)測運(yùn)動(dòng)向量之間的差。運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115使用從屏幕重排緩沖器102提供的輸入圖像以及關(guān)于生成的差運(yùn)動(dòng)向量的信息，來評估每個(gè)預(yù)測圖像的成本函數(shù)值，并選擇最佳模式。在選擇最佳幀間預(yù)測模式之后，運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115將在最佳幀間預(yù)測模式下生成的預(yù)測圖像提供給預(yù)測圖像選擇單元116。
[0114]當(dāng)對表示所選擇的幀間預(yù)測模式的信息和編碼數(shù)據(jù)進(jìn)行解碼時(shí)，運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115將以幀間預(yù)測模式執(zhí)行處理所需的信息提供給無損編碼單元106，以對該信息進(jìn)行編碼。所需的信息包括關(guān)于生成的差運(yùn)動(dòng)向量的信息以及包含表示預(yù)測運(yùn)動(dòng)向量的索引的標(biāo)記的預(yù)測運(yùn)動(dòng)向量信息等。
[0115]預(yù)測圖像選擇單元116選擇向算術(shù)運(yùn)算單元103和算術(shù)運(yùn)算單元110提供預(yù)測圖像的供應(yīng)方。例如，在幀間編碼的情況下，預(yù)測圖像選擇單元116選擇運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115作為預(yù)測圖像的供應(yīng)方，并且將從運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115提供的預(yù)測圖像提供給算術(shù)運(yùn)算單元103和算術(shù)運(yùn)算單元110。
[0116]速率控制單元117基于累積緩沖器107中所累積的編碼數(shù)據(jù)的位速率來控制量化單元105的量化操作速率，以便不引起上溢或下溢。
[0117]運(yùn)動(dòng)向量編碼單元121根據(jù)鄰近區(qū)域的運(yùn)動(dòng)向量來預(yù)測運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115檢測到的當(dāng)前區(qū)域的運(yùn)動(dòng)向量。換言之，運(yùn)動(dòng)向量編碼單元121生成用于對當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼或解碼的預(yù)測運(yùn)動(dòng)向量。
[0118]具體地，運(yùn)動(dòng)向量編碼單元121通過使用時(shí)間上或空間上與當(dāng)前區(qū)域鄰近的鄰近區(qū)域的運(yùn)動(dòng)向量來生成當(dāng)前區(qū)域的預(yù)測運(yùn)動(dòng)向量(預(yù)測值(predictor))。
[0119]預(yù)測運(yùn)動(dòng)向量的類型包括時(shí)間預(yù)測運(yùn)動(dòng)向量(時(shí)間預(yù)測值)和空間預(yù)測運(yùn)動(dòng)向量(空間預(yù)測值)。時(shí)間預(yù)測運(yùn)動(dòng)向量是通過使用時(shí)間上與當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量而生成的預(yù)測運(yùn)動(dòng)向量?？臻g預(yù)測運(yùn)動(dòng)向量是通過使用空間上與當(dāng)前區(qū)域鄰近的空間鄰近區(qū)域的運(yùn)動(dòng)向量而生成的預(yù)測運(yùn)動(dòng)向量。
[0120]運(yùn)動(dòng)向量編碼單元121將生成的時(shí)間預(yù)測運(yùn)動(dòng)向量提供給奇偶性調(diào)整單元122。
[0121]在圖像編碼裝置100中，對隔行信號(hào)的輸入和輸出進(jìn)行處理。在構(gòu)成隔行信號(hào)中的一幀的兩個(gè)場之中，空間上位于頂部的場被稱作頂場，而空間上位于底部的場被稱作底場。作為頂場或底場的場的類型被稱作奇偶性。
[0122]運(yùn)動(dòng)向量編碼單元121將指示由當(dāng)前區(qū)域的運(yùn)動(dòng)向量表示的奇偶性關(guān)系和由時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量(或時(shí)間預(yù)測運(yùn)動(dòng)向量)表示的奇偶性關(guān)系的信息提供給奇偶性調(diào)整單元122。由當(dāng)前區(qū)域的運(yùn)動(dòng)向量表示的奇偶性關(guān)系是當(dāng)前區(qū)域的奇偶性與當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域的奇偶性之間的關(guān)系。由時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量表示的奇偶性關(guān)系是時(shí)間鄰近區(qū)域的奇偶性與時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域的奇偶性之間的關(guān)系。
[0123]響應(yīng)于這些供應(yīng)，從奇偶性調(diào)整單元122提供進(jìn)行了移位調(diào)整的時(shí)間預(yù)測運(yùn)動(dòng)向量。運(yùn)動(dòng)向量編碼單元121將進(jìn)行了移位的所生成的空間預(yù)測運(yùn)動(dòng)向量或時(shí)間預(yù)測運(yùn)動(dòng)向量(無論哪個(gè)是最佳預(yù)測運(yùn)動(dòng)向量)提供給運(yùn)動(dòng)預(yù)測/補(bǔ)償單元115。
[0124]通過參考從運(yùn)動(dòng)向量編碼單元121提供的奇偶性相關(guān)信息，奇偶性調(diào)整單元122根據(jù)由關(guān)于當(dāng)前區(qū)域的運(yùn)動(dòng)向量信息指示的奇偶性關(guān)系以及由關(guān)于時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量信息指示的奇偶性關(guān)系來對時(shí)間預(yù)測運(yùn)動(dòng)向量信息進(jìn)行移位調(diào)整。奇偶性調(diào)整單元122將進(jìn)行了移位調(diào)整的時(shí)間預(yù)測運(yùn)動(dòng)向量提供給運(yùn)動(dòng)向量編碼單元121。
[0125]在本實(shí)施例中，運(yùn)動(dòng)向量預(yù)測是生成預(yù)測運(yùn)動(dòng)向量的處理，運(yùn)動(dòng)向量編碼被描述為生成預(yù)測運(yùn)動(dòng)向量以及通過使用所生成的預(yù)測運(yùn)動(dòng)向量計(jì)算差運(yùn)動(dòng)向量的處理。即，運(yùn)動(dòng)向量編碼處理包括運(yùn)動(dòng)向量預(yù)測處理。同樣，運(yùn)動(dòng)向量解碼被描述為生成預(yù)測運(yùn)動(dòng)向量以及通過使用所生成的預(yù)測運(yùn)動(dòng)向量來重構(gòu)運(yùn)動(dòng)向量的處理。即，運(yùn)動(dòng)向量解碼處理包括運(yùn)動(dòng)向量預(yù)測處理。
[0126]與當(dāng)前區(qū)域鄰近的上述鄰近區(qū)域也是位于當(dāng)前區(qū)域附近的鄰近區(qū)域，并且在以下描述中將使用這兩個(gè)術(shù)語來表示同一區(qū)域。
[0127][1/4像素精度運(yùn)動(dòng)預(yù)測]
[0128]圖2是用于說明AVC中規(guī)定的1/4像素精度的示例運(yùn)動(dòng)預(yù)測/補(bǔ)償處理的圖。在圖2中，每個(gè)方塊表示像素。在這些方塊中，每個(gè)A表示存儲(chǔ)在幀存儲(chǔ)器112中的整數(shù)精度像素的位置，“b”、“c”和“d”表示的1/2精度像素的位置，并且el、e2和e3表示1/4精度像素的位置。
[0129]在下文中，如以下等式(I)所示，定義函數(shù)CliplO。
[0130][數(shù)學(xué)公式I]
[0131]
【權(quán)利要求】
1.一種圖像處理裝置，包括: 預(yù)測運(yùn)動(dòng)向量生成單元，被配置成通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量； 奇偶性調(diào)整單 元，被配置成根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整；以及 運(yùn)動(dòng)向量解碼單元，被配置成通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的所述運(yùn)動(dòng)向量進(jìn)行解碼。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中， 當(dāng)由所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系指示的相移不同于由所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系指示的相移時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整。
3.根據(jù)權(quán)利要求2所述的圖像處理裝置，其中， 當(dāng)由所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系指示的相移和由所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系指示的相移相反時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行I或-1移位調(diào)整。
4.根據(jù)權(quán)利要求3所述的圖像處理裝置，其中， 當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系為“BT”而所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系為“TB”時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行I移位調(diào)整。
5.根據(jù)權(quán)利要求2所述的圖像處理裝置，其中， 當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系以及所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系中只有一個(gè)奇偶性關(guān)系指示相移、而另一個(gè)所述奇偶性關(guān)系指示沒有相移時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行1/2或-1/2移位調(diào)整。
6.根據(jù)權(quán)利要求5所述的圖像處理裝置，其中， 當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系為“TT”而所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系為“BT”時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行1/2移位調(diào)整。
7.根據(jù)權(quán)利要求2所述的圖像處理裝置，其中， 所述運(yùn)動(dòng)向量解碼單元基于高級運(yùn)動(dòng)向量預(yù)測，通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼。
8.根據(jù)權(quán)利要求2所述的圖像處理裝置，其中， 所述運(yùn)動(dòng)向量解碼單元基于運(yùn)動(dòng)分區(qū)合并，通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼。
9.一種圖像處理方法，包括: 通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量; 根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所生成的時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整；以及 通過使用垂直分量經(jīng)過所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行解碼， 圖像處理裝置生成所述時(shí)間預(yù)測運(yùn)動(dòng)向量，進(jìn)行所述移位調(diào)整，并且對所述當(dāng)前區(qū)域的所述運(yùn)動(dòng)向量進(jìn)行解碼。
10.一種圖像處理裝置，包括: 預(yù)測運(yùn)動(dòng)向量生成單元，被配置成通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量； 奇偶性調(diào)整單元，被配置成根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整；以及 運(yùn)動(dòng)向量編碼單元，被配置成通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元進(jìn)行的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼。
11.根據(jù)權(quán)利要求10所述的圖像處理裝置，其中， 當(dāng)由所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系指示的相移不同于由所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系指示的相移時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整。
12.根據(jù)權(quán)利要求11所述的圖像處理裝置，其中， 當(dāng)由所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系指示的相移和由所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系指示的相移相反時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行I或-1移位調(diào)整。
13.根據(jù)權(quán)利要求12所述的圖像處理裝置，其中， 當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系為“BT”而所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系為“TB”時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行I移位調(diào)整。
14.根據(jù)權(quán)利要求11所述的圖像處理裝置，其中， 當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系以及所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系中只有一個(gè)奇偶性關(guān)系指示相移、而另一個(gè)所述奇偶性關(guān)系指示沒有相移時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行1/2或-1/2移位調(diào)整。
15.根據(jù)權(quán)利要求14所述的圖像處理裝置，其中， 當(dāng)所述當(dāng)前區(qū)域與所述當(dāng)前參考區(qū)域之間的奇偶性關(guān)系為“TT”而所述時(shí)間鄰近區(qū)域與所述鄰近參考區(qū)域之間的奇偶性關(guān)系為“BT”時(shí)，所述奇偶性調(diào)整單元對所述預(yù)測運(yùn)動(dòng)向量生成單元生成的所述時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行1/2移位調(diào)整。
16.根據(jù)權(quán)利要求11所述的圖像處理裝置，其中， 所述運(yùn)動(dòng)向量編碼單元基于高級運(yùn)動(dòng)向量預(yù)測，通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼。
17.根據(jù)權(quán)利要求11所述的圖像處理裝置，其中， 所述運(yùn)動(dòng)向量編碼單元基于運(yùn)動(dòng)分區(qū)合并，通過使用垂直分量經(jīng)過所述奇偶性調(diào)整單元進(jìn)行的所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼。
18.—種圖像處理方法，包括: 通過使用時(shí)間上位置與隔行信號(hào)的圖像中的當(dāng)前區(qū)域鄰近的時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量，來生成用于對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼的預(yù)測運(yùn)動(dòng)向量的時(shí)間預(yù)測運(yùn)動(dòng)向量; 根據(jù)所述當(dāng)前區(qū)域與所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量要參考的當(dāng)前參考區(qū)域之間的奇偶性關(guān)系、以及所述時(shí)間鄰近區(qū)域與所述時(shí)間鄰近區(qū)域的運(yùn)動(dòng)向量要參考的鄰近參考區(qū)域之間的奇偶性關(guān)系，來對所生成的時(shí)間預(yù)測運(yùn)動(dòng)向量的垂直分量進(jìn)行移位調(diào)整；以及 通過使用垂直分量經(jīng)過所述移位調(diào)整的所述時(shí)間預(yù)測運(yùn)動(dòng)向量，來對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼， 圖像處理裝置生成所述時(shí)間預(yù)測運(yùn)動(dòng)向量，進(jìn)行所述移位調(diào)整，并且對所述當(dāng)前區(qū)域的運(yùn)動(dòng)向量進(jìn)行編碼。
【文檔編號(hào)】H04N19/19GK103959784SQ201280059313
【公開日】2014年7月30日 申請日期:2012年11月28日 優(yōu)先權(quán)日:2011年12月6日
【發(fā)明者】佐藤數(shù)史 申請人:索尼公司