專利名稱：圖像處理設(shè)備、圖像處理方法和程序的制作方法
技術(shù)領(lǐng)域：
本公開涉及圖像處理設(shè)備、圖像處理方法和程序。
背景技術(shù)：
近來，發(fā)布了 3D顯示設(shè)備，其通過顯示用于左眼的圖像和用于右眼的圖像，能夠使用戶感知立體圖像。預(yù)期3D顯示設(shè)備將來將變得傳播更廣泛，例如，因?yàn)闉?D視覺化創(chuàng)作的TV視頻和電影正在增加，并且還因?yàn)檎诜e極從事用于將2D圖像轉(zhuǎn)換為3D圖像的技術(shù)。此外，可以舉出JP 2004-38933A作為描述3D顯示設(shè)備的文獻(xiàn)。此外，以IEEE(電氣電子工程師協(xié)會(huì))802. 11為代表的無線LAN(局域網(wǎng))系統(tǒng)， 由于其諸如設(shè)備的高靈活性的優(yōu)點(diǎn)，正替代有線網(wǎng)絡(luò)日益變得普遍。通過IEEE 802. 11標(biāo)準(zhǔn)化的無線LAN系統(tǒng)由一組無線通信設(shè)備和多個(gè)站構(gòu)成，該組無線通信設(shè)備是操作為主單元的接入點(diǎn)，多個(gè)站操作為從單元，并且多個(gè)站連接到一個(gè)接入點(diǎn)。此外，根據(jù)Wi-Fi聯(lián)盟下的Wi-Fi直連(Wi-Fi Direct)，提出通過確定多個(gè)無線通信設(shè)備的每個(gè)用作組所有者和客戶端的哪個(gè)，來形成通信組。形成通信組的、用作組所有者的無線通信設(shè)備和用作客戶端的無線通信設(shè)備可以相互直接無線通信。

發(fā)明內(nèi)容
然而，當(dāng)前無線通信的傳輸速率和一些有線方法的傳輸速率不足以傳送未壓縮圖像。因此，假設(shè)這樣的情況，其中為了傳送上述3D圖像，將3D圖像壓縮。按照以上所述，期望提供一種新穎的和改進(jìn)的圖像處理設(shè)備、圖像處理方法和程序，其能夠以改進(jìn)再現(xiàn)質(zhì)量的方式壓縮圖像。根據(jù)本公開實(shí)施例，提供了一種圖像處理設(shè)備，包括幀圖像生成單元，用于生成其中第一圖像和第二圖像相互相鄰安排的幀圖像；以及壓縮處理單元，用于以宏塊為單位壓縮幀圖像。幀圖像生成單元安排第一圖像和第二圖像，使得第一圖像和第二圖像之間的邊界與宏塊的邊界一致。幀圖像生成單元可以通過在安排方向上對(duì)第一圖像和第二圖像的兩側(cè)插入啞數(shù)據(jù)，使得第一圖像和第二圖像之間的邊界與宏塊的邊界一致。幀圖像生成單元可以將存儲(chǔ)沿著安排方向的、第一圖像或第二圖像必需的宏塊數(shù)量的兩倍值，乘以安排方向上的宏塊的像素?cái)?shù)量，以及將乘法結(jié)果和安排方向上幀圖像的有效像素的數(shù)量之間的差作為啞數(shù)據(jù)，分發(fā)給安排方向上幀圖像的兩側(cè)。幀圖像生成單元可以在沿著安排方向的第一圖像和第二圖像的有效像素的數(shù)量相同的情況下，將啞數(shù)據(jù)相等地分發(fā)給安排方向上幀圖像的兩側(cè)，以及在沿著安排方向的第一圖像和第二圖像的有效像素的數(shù)量不同的情況下，將更多啞數(shù)據(jù)分發(fā)給這樣的圖像的安排側(cè)，該側(cè)具有比另一側(cè)更少的有效像素。所述圖像處理設(shè)備還可以包括無線通信單元，用于無線傳輸已經(jīng)通過壓縮處理單元壓縮的幀圖像。安排方向上幀圖像的有效像素的數(shù)量可以不同于安排方向上宏塊的像素?cái)?shù)量的偶數(shù)倍。第一圖像可以是用于左眼的圖像，并且第二圖像可以是用于右眼的圖像。根據(jù)本公開另一實(shí)施例，提供了一種圖像處理方法，包括生成其中第一圖像和第二圖像相互相鄰安排的幀圖像；以及以宏塊為單位壓縮幀圖像。在生成幀圖像的步驟中，安排第一圖像和第二圖像，使得第一圖像和第二圖像之間的邊界與宏塊的邊界一致。根據(jù)本公開另一實(shí)施例，提供了一種使得計(jì)算機(jī)用作圖像處理設(shè)備的程序，該圖像處理設(shè)備包括幀圖像生成單元，用于生成其中第一圖像和第二圖像相互相鄰安排的幀圖像；以及壓縮處理單元，用于以宏塊為單位壓縮幀圖像。幀圖像生成單元安排第一圖像和第二圖像，使得第一圖像和第二圖像之間的邊界與宏塊的邊界一致。根據(jù)上述本公開實(shí)施例，可以以改進(jìn)再現(xiàn)質(zhì)量的方式壓縮圖像。


圖I是示出根據(jù)本公開實(shí)施例的圖像再現(xiàn)系統(tǒng)的配置的說明圖2是示出PC的軟件構(gòu)思的說明圖3是示出2D圖像的壓縮方法的說明圖4是示出通過另一技術(shù)的3D幀圖像的壓縮方法的說明圖5是示出根據(jù)本公開實(shí)施例的PC的硬件配置的說明圖6是示出根據(jù)本公開實(shí)施例的顯示設(shè)備和PC的配置的功能框圖7是示出分組生成單元的配置的說明圖8是示出分組結(jié)構(gòu)的說明圖9是示出由圖像生成單元生成的幀圖像的具體示例的說明圖10是示出由圖像生成單元生成的幀圖像的具體示例的說明圖11是示出根據(jù)本公開第一實(shí)施例的顯示設(shè)備和PC的操作的流程圖
圖12是示出由圖像生成單元生成的幀圖像的具體示例的說明圖以及 13是示出由圖像生成單元生成的幀圖像的具體示例的說明圖。
具體實(shí)施例方式以下，將參考附圖詳細(xì)描述本公開的優(yōu)選實(shí)施例。注意，在本說明書和附圖中，具有實(shí)質(zhì)相同功能和配置的結(jié)構(gòu)元件用相同參考標(biāo)號(hào)表示，并且省略這些結(jié)構(gòu)元件的重復(fù)說明。在本說明書和附圖中，有時(shí)通過對(duì)相同的參考標(biāo)號(hào)添加不同的字母，相互區(qū)分對(duì)具有實(shí)質(zhì)相同功能的多個(gè)結(jié)構(gòu)元件。然而，如果不是特別需要區(qū)分具有實(shí)質(zhì)相同功能配置的多個(gè)結(jié)構(gòu)元件的每個(gè)，只分配相同的參考標(biāo)號(hào)。此外，將按照以下順序描述“具體實(shí)施方式
”。I.圖像再現(xiàn)系統(tǒng)的概況2.硬件配置3.第一實(shí)施例
3-1. PC和顯示設(shè)備的配置3-2. PC和顯示設(shè)備的操作4.第二實(shí)施例5 結(jié)論〈I.圖像再現(xiàn)系統(tǒng)的概況〉圖I是示出根據(jù)本公開實(shí)施例的圖像再現(xiàn)系統(tǒng)I的配置的說明圖。如圖I所示， 根據(jù)本公開實(shí)施例的圖像再現(xiàn)系統(tǒng)I包括顯示設(shè)備10、PC 20和快門眼鏡30。PC(個(gè)人計(jì)算機(jī))20具有與附近的無線通信設(shè)備(如顯示設(shè)備10)連接并無線通信的功能。例如，PC 20可以根據(jù)Wi-Fi聯(lián)盟標(biāo)準(zhǔn)開發(fā)下的Wi-Fi直連，與顯示設(shè)備10形成通信組，并且與通信組中的顯示設(shè)備10無線通信而不使用接入點(diǎn)。此外，與顯示設(shè)備10形成通信組，PC 20可以傳輸內(nèi)容數(shù)據(jù)、控制數(shù)據(jù)等到顯示設(shè)備10。在本說明書中，主要描述了這樣的實(shí)施例，其中傳輸包括由R圖像和L圖像組成的多個(gè)幀圖像的圖像數(shù)據(jù)，作為內(nèi)容數(shù)據(jù)的示例。圖像數(shù)據(jù)可以是如電影、電視節(jié)目或視頻節(jié)目、PC 20中的用戶的工作屏幕、或游戲的顯示屏幕的數(shù)據(jù)。然而，內(nèi)容數(shù)據(jù)不限于圖像數(shù)據(jù)，并且還可以傳輸如音樂、演講或無線電廣播節(jié)目的音頻數(shù)據(jù)，作為來自PC 20的內(nèi)容數(shù)據(jù)。以下參考圖2描述其中傳送圖像數(shù)據(jù)和控制數(shù)據(jù)的層。圖2是示出PC 20的軟件構(gòu)思的說明圖。如圖2所示，使用MPEG-TS/RTP/UDP/ IP等傳輸如圖像數(shù)據(jù)的內(nèi)容數(shù)據(jù)。另一方面，通過不同于圖像數(shù)據(jù)的通信路徑的通信路徑 (如TCP/IP或L2層)傳輸控制數(shù)據(jù)。此外，圖I僅僅示出PC 20作為圖像處理設(shè)備的示例，而圖像處理設(shè)備不限于PC 20。例如，圖像處理設(shè)備可以是信息處理設(shè)備，如家庭視頻處理設(shè)備(例如，DVD記錄器、盒式錄像機(jī)等)、PDA(個(gè)人數(shù)字助理)、移動(dòng)電話、家庭游戲機(jī)、便攜式視頻處理設(shè)備、便攜式游戲機(jī)、或家用電器。顯示設(shè)備10具有與附近的無線通信設(shè)備(如PC 20)連接和無線通信的功能。例如，顯示設(shè)備10可以根據(jù)Wi-Fi聯(lián)盟標(biāo)準(zhǔn)開發(fā)下的Wi-Fi直連，與PC 20形成通信組，并且與通信組中的PC 20無線通信而不使用接入點(diǎn)。此外，例如，即使顯示設(shè)備10和PC 20連接到相同接入點(diǎn)(AP)時(shí)，它們也可以使用IEEE802. Ilz(TDLS)進(jìn)行直接通信。此外，顯示設(shè)備10和PC 20還可以通過連線進(jìn)行通信。此外，與PC 20形成通信組，顯示設(shè)備10可以接收從PC 20傳輸?shù)膱D像數(shù)據(jù)，并且顯示接收的圖像數(shù)據(jù)。在該配置中，用戶可以用更大的屏幕在顯示設(shè)備10上顯示在PC 20 中處理的圖像數(shù)據(jù)，而不需復(fù)雜的工作。此外，通過顯示用于左眼的L圖像和用于右眼的R圖像，顯示設(shè)備10可以允許佩戴快門眼鏡30的用戶感知立體圖像?？扉T眼鏡30包括例如由液晶快門形成的、R圖像傳輸單元32和L圖像傳輸單元 34?？扉T眼鏡30根據(jù)從顯示設(shè)備10傳輸?shù)男盘?hào)，執(zhí)行R圖像傳輸單元32和L圖像傳輸單元34的打開/關(guān)閉操作。允許用戶通過經(jīng)由快門眼鏡30的R圖像傳輸單元32和L圖像傳輸單元34，觀看從顯示設(shè)備10發(fā)出的光，將顯示設(shè)備10上顯示的L圖像和R圖像感知為立體圖像。
5
另一方面，當(dāng)普通2D圖像顯示在顯示設(shè)備10上時(shí)，允許用戶通過直接觀看從顯示設(shè)備10發(fā)出的光，將顯示設(shè)備10上顯示的圖像感知為普通2D圖像。此外，圖I僅僅示出顯示設(shè)備10作為圖像再現(xiàn)設(shè)備的示例，而圖像再現(xiàn)設(shè)備不限于顯示設(shè)備10。例如，圖像再現(xiàn)設(shè)備可以是具有圖像再現(xiàn)功能的任何信息處理設(shè)備，如PC 或視頻處理設(shè)備。此外，盡管圖I中圖示了在PC 20和顯示設(shè)備10中實(shí)現(xiàn)無線通信功能的示例，但是實(shí)施例不限于這樣的示例。例如，具有無線通信功能、圖像數(shù)據(jù)編碼功能和分組化功能的適配器外部地附接到PC 20。同樣地，具有無線通信功能、圖像數(shù)據(jù)解碼功能等的適配器外部地附接到顯示設(shè)備10。此外，上面已經(jīng)描述了這樣的控制方法，其使用快門操作以使得L圖像由左眼感知并且使得R圖像由右眼感知，但是該控制方法不限于這樣的示例。例如，通過使用用于左眼的偏振濾光片和用于右眼的偏振濾光片，也可以獲得等效效果。而且,在本說明書中，描述了這樣的不例,其中PC 20作為一個(gè)巾貞圖像傳輸作為第一圖像和第二圖像的R圖像和L圖像，但是第一圖像和第二圖像可以是獨(dú)立圖像。例如，第一圖像可以是用于第一用戶的圖像，并且第二圖像可以是用于第二用戶的圖像。更具體地， 第一圖像和第二圖像可以是用于各個(gè)用戶的游戲屏幕、節(jié)目屏幕等。(背景)現(xiàn)在，作為PC 20使用的將L圖像和R圖像存儲(chǔ)到一個(gè)幀圖像中的方法，存在并排方法和上下方法。并排方法是在水平方向上相互相鄰安排L圖像和R圖像的方法，并且上下方法是在垂直方向上相互相鄰安排L圖像和R圖像的方法。而且，在通過連線(如HDMI)執(zhí)行通信的情況下，因?yàn)閷?duì)最大傳輸速率存在余量， 并且錯(cuò)誤率也足夠低，所以PC 20還可以分開地?cái)?shù)字傳輸每個(gè)像素而不用壓縮幀圖像。相應(yīng)地，每個(gè)像素的傳輸不受圖像的其他部分的影響。另一方面，在將幀圖像無線傳輸?shù)斤@示設(shè)備10的情況下，因?yàn)楫?dāng)前無線帶寬不足以傳輸未壓縮的幀圖像，所以壓縮幀圖像。其他技術(shù)具有與該壓縮有關(guān)的若干問題。在下面，將參考圖3和4詳細(xì)描述該問題。圖3是示出2D圖像的壓縮方法的說明圖。圖像處理設(shè)備以稱為宏塊的像素區(qū)域?yàn)閱挝粔嚎s作為壓縮目標(biāo)的2D圖像。通常，宏塊為16*16像素的像素區(qū)域。因此，在壓縮垂直方向上的有效屏幕大小為1080像素的2D圖像的情況下，在下邊緣存在用于形成一個(gè)宏塊的像素的短缺，如圖3所示，因此在下邊緣插入8個(gè)像素的啞數(shù)據(jù)。根據(jù)另一技術(shù)的圖像處理設(shè)備對(duì)由L圖像和R圖像構(gòu)成的3D幀圖像執(zhí)行類似的處理，如下面將參考圖4描述的。圖4是示出通過另一技術(shù)的3D幀圖像的壓縮方法的說明圖。如圖4所示，在對(duì)于 L圖像和R圖像垂直方向上像素的數(shù)量為540的情況下，根據(jù)另一技術(shù)的圖像處理設(shè)備以與圖3所示的示例相同的方式，在下邊緣插入8像素的啞數(shù)據(jù)，并且以宏塊為單位壓縮幀圖像。另外，用虛線描出輪廓的矩形區(qū)域?qū)?yīng)于宏塊。然而，在存在延伸跨越L圖像的下面部分和R圖像的上面部分的宏塊的情況下，一個(gè)圖像的壓縮狀態(tài)根據(jù)其他圖像的壓縮狀態(tài)改變。相應(yīng)地，即使L圖像的下面部分對(duì)于多個(gè)幀圖像是靜態(tài)圖像，如果R圖像的上面部分包括運(yùn)動(dòng)，則在運(yùn)動(dòng)的影響下，改變壓縮L圖像的方式。因此,關(guān)于主觀(subjective)圖像質(zhì)量，L圖像的下面部分可能抖動(dòng)。例如，如上所述的這樣的問題可能出現(xiàn)在人正在地面上跑步的幀圖像中。此外，與有線通信相比，通常無線通信具有高錯(cuò)誤率和差傳輸質(zhì)量。相應(yīng)地，如果無線傳輸已經(jīng)以上述方式壓縮的幀圖像，則預(yù)期出現(xiàn)數(shù)據(jù)丟失。特別地，在期望減少傳輸延遲的應(yīng)用中，使用UDP替代TCP，因此出現(xiàn)數(shù)據(jù)丟失的比率高。當(dāng)這樣的數(shù)據(jù)丟失出現(xiàn)時(shí)，2D 圖像在再現(xiàn)時(shí)在圖像中將只有一個(gè)受損部分，但是如果數(shù)據(jù)丟失出現(xiàn)在延伸跨越L圖像的下面部分和R圖像的上面部分的宏塊中，則兩個(gè)部分(即，L圖像的下面部分和R圖像的上面部分)將受損。此外，在正常廣播中，以過掃描執(zhí)行顯示，并且在屏幕邊緣處存在的錯(cuò)誤不可能被用戶感知，但是不是在所有情況下以過掃描執(zhí)行顯示。特別地，對(duì)于與PC有關(guān)的內(nèi)容，在許多情況下以全像素模式執(zhí)行顯示。在該情況下，在邊緣處的圖像受損容易被用戶感知。相應(yīng)地，已經(jīng)從上述情況的觀點(diǎn)做出本公開的實(shí)施例。根據(jù)本公開的實(shí)施例，3D幀圖像可以以改進(jìn)再現(xiàn)質(zhì)量的方式壓縮。在下面，首先將描述PC 20和顯示設(shè)備10的硬件配置，然后，將詳細(xì)描述如上所述的本公開的每個(gè)實(shí)施例?！?.硬件配置>圖5是示出根據(jù)本公開實(shí)施例的PC 20的硬件配置的說明圖。PC 20包括CPU (中央處理單元)201、ROM (只讀存儲(chǔ)器)202、RAM (隨機(jī)存取存儲(chǔ)器)203、和主機(jī)總線204。PC 20還包括橋205、外部總線206、接口 207、輸入設(shè)備208、輸出設(shè)備210、存儲(chǔ)設(shè)備(HDD) 211、 驅(qū)動(dòng)器212和通信設(shè)備215。CPU 201用作處理設(shè)備和控制設(shè)備，并且其根據(jù)程序控制PC 20中的整體操作。 CPU 201可以是微處理器。ROM 202存儲(chǔ)CPU 201要使用的程序、處理參數(shù)等。RAM 203暫時(shí)存儲(chǔ)CPU 201的執(zhí)行中要使用的程序、執(zhí)行中變化的參數(shù)等。CPU 201、ROM 202和RAM 203通過主機(jī)總線204相互連接,該主機(jī)總線204可以是CPU總線等。主機(jī)總線204經(jīng)由橋205連接到外部總線206 (如PCI (外圍組件互連/接口)總線)。主機(jī)總線204、橋205和外部總線206不必相互分離，并且它們的功能可以通過一條總線實(shí)現(xiàn)。例如，輸入設(shè)備208可以包括用于用戶輸入信息的輸入部件，如鼠標(biāo)、鍵盤、觸摸面板、按鈕、麥克風(fēng)、開關(guān)或操縱桿，以及輸入控制電路，其用于生成基于用戶輸入的輸入信號(hào)，并且將輸入信號(hào)輸出到CPU 20UPC 20的用戶操縱輸入設(shè)備208，從而輸入各種類型的數(shù)據(jù)或者指令處理操作到PC20。例如，輸出設(shè)備210可以包括顯示設(shè)備，如CRT(陰極射線管)顯示設(shè)備、IXD(液晶顯示器)設(shè)備、OLED(有機(jī)發(fā)光顯示器)設(shè)備或燈。此外，例如，輸出設(shè)備210可以包括音頻輸出設(shè)備，如揚(yáng)聲器或耳機(jī)。例如，輸出設(shè)備210輸出再現(xiàn)的內(nèi)容。具體地，顯示設(shè)備顯示各種類型的信息，如通過文本或圖像的再現(xiàn)視頻數(shù)據(jù)。另一方面，音頻輸出設(shè)備將再現(xiàn)的音頻數(shù)據(jù)等轉(zhuǎn)換為聲音并且輸出聲音。存儲(chǔ)設(shè)備211是用于數(shù)據(jù)存儲(chǔ)的設(shè)備，其根據(jù)本實(shí)施例配置為PC 20的存儲(chǔ)單元的示例。存儲(chǔ)設(shè)備211可以包括存儲(chǔ)介質(zhì)、用于將數(shù)據(jù)記錄到存儲(chǔ)介質(zhì)中的記錄設(shè)備、用于從存儲(chǔ)介質(zhì)讀取數(shù)據(jù)的讀取設(shè)備、用于刪除存儲(chǔ)介質(zhì)中記錄的數(shù)據(jù)的刪除設(shè)備等。例如，存儲(chǔ)設(shè)備211可以是HDD (硬盤驅(qū)動(dòng)器)。存儲(chǔ)設(shè)備211驅(qū)動(dòng)硬盤，并且存儲(chǔ)要由CPU 201執(zhí)行的程序和各種數(shù)據(jù)。
驅(qū)動(dòng)器212是用于存儲(chǔ)介質(zhì)的讀取器/寫入器，并且可以并入PC 20中或外部地附接到PC 20。驅(qū)動(dòng)器212讀取附接到其的可移除存儲(chǔ)介質(zhì)24 (如磁盤、光盤、磁光盤或半導(dǎo)體存儲(chǔ)器)中記錄的信息，并且將信息輸出到RAM203。此外，驅(qū)動(dòng)器212可以將信息寫入可移除存儲(chǔ)介質(zhì)24中。例如，通信設(shè)備215是由通信設(shè)備等配置的通信接口，以與附近的無線通信設(shè)備或網(wǎng)絡(luò)建立連接。通信設(shè)備215可以是與無線LAN(局域網(wǎng))兼容的通信設(shè)備、與LTE(長期演進(jìn))兼容的通信設(shè)備、或執(zhí)行有線通信的連線通信設(shè)備。此外，盡管上面已經(jīng)參考圖5描述了 PC 20的硬件配置，但是顯示設(shè)備10的硬件可以以與PC 20的硬件基本相同的方式配置，并且省略其說明。<3.第一實(shí)施例>在前面，已經(jīng)參考圖5描述了 PC 20和顯示設(shè)備10的硬件配置。接著，將參考圖 6到11描述本公開的第一實(shí)施例。(3-1. PC和顯示設(shè)備的配置)圖6是示出根據(jù)本公開實(shí)施例的顯示設(shè)備10和PC 20的配置的功能框圖。如圖 6所示，顯示設(shè)備10包括圖像分離單元120、解碼器130、無線通信單元140、控制單元150、 顯示單元160和紅外發(fā)射器170。此外，PC 20包括存儲(chǔ)單元216、圖像生成單元220、分組生成單元230、無線通信單元240和控制單元250。PC 20的存儲(chǔ)單元216存儲(chǔ)內(nèi)容數(shù)據(jù)，如由L圖像和R圖像構(gòu)成的3D圖像。這樣的存儲(chǔ)單元216可以是如非易失性存儲(chǔ)器、磁盤、光盤、磁光(MO)盤等的存儲(chǔ)介質(zhì)。作為非易失性存儲(chǔ)器，例如可以舉出EEPROM(電可擦除可編程只讀存儲(chǔ)器)和EPROM(可擦除可編程ROM)。而且，作為磁盤，可以舉出硬盤、盤狀磁盤等。此外，作為光盤，可以舉出⑶(致密盤)、DVD-R(可記錄數(shù)字多功能盤)、BD(藍(lán)光盤(注冊(cè)商標(biāo)))等。例如，圖像生成單元(幀圖像生成單元)220通過將從存儲(chǔ)單元216提供的L圖像和R圖像相互相鄰安排，生成一個(gè)幀圖像。此時(shí)，圖像生成單元220以這樣的方式安排L圖像和R圖像，使得L圖像和R圖像之間的邊界與作為幀圖像壓縮的單位的宏塊的邊界一致， 如稍后將詳細(xì)描述的。分組生成單元230生成用于無線傳輸由多個(gè)幀圖像構(gòu)成的圖像數(shù)據(jù)的分組，多個(gè)幀圖像從圖像生成單元220提供。在下面，將參考圖7和8描述該分組生成單元230的詳
細(xì)配置。圖7是示出分組生成單元230的配置的說明圖。如圖7所示，分組生成單元230 包括圖像編碼器231、音頻編碼器232、PES分組化器233、加密處理單元234和TS復(fù)用器 235。圖像編碼器231是壓縮處理單元，其壓縮編碼并輸出提供的圖像數(shù)據(jù)。類似地，音頻編碼器232壓縮編碼并輸出提供的音頻數(shù)據(jù)。此外，圖像編碼器231和音頻編碼器232 能夠根據(jù)來自控制單元250的指令，改變各個(gè)數(shù)據(jù)項(xiàng)目的壓縮率。PES分組化器233從自圖像編碼器231輸出的圖像數(shù)據(jù)、和自音頻編碼器232輸出的音頻數(shù)據(jù)，生成PES分組。更具體地，PES分組化器233生成由PES報(bào)頭和PES有效載荷構(gòu)成的PES分組，如圖8的⑴所示。PES報(bào)頭包括用于描述定時(shí)信息(如DTS(解碼時(shí)間戳)、PTS(呈現(xiàn)時(shí)間戳)等)的字段。
加密處理單元234加密從PES分組化器233提供的PES分組并將其輸出。例如， 加密處理單元234可以通過HDCP (高帶寬數(shù)字內(nèi)容保護(hù))系統(tǒng)2. 0加密PES分組。TS復(fù)用器235生成由TS報(bào)頭和TS有效載荷構(gòu)成的TS流，如圖8的⑵所示。此外，例如通過將PES分組劃分為188字節(jié)固定長度獲得TS有效載荷。該TS流作為其中添加RTP報(bào)頭的RTP分組傳輸，如圖8的(3)所示。無線通信單元240無線傳輸包含由分組生成單元230生成的圖像數(shù)據(jù)、控制單元 250指定的控制數(shù)據(jù)等的RTP分組。例如，該無線通信單元240可以根據(jù)Wi-Fi聯(lián)盟下的 Wi-Fi直連操作?？刂茊卧?50控制PC 20的整體操作。例如，控制單元250控制存儲(chǔ)通過圖像生成單元220的L圖像和R圖像的方法、分組生成單元230處的數(shù)據(jù)壓縮率、以及通過無線通信單元240的無線通信。顯示設(shè)備10的無線通信單元140從PC 20接收包含圖像數(shù)據(jù)、控制數(shù)據(jù)等的RTP 分組。例如，該無線通信單元140可以根據(jù)Wi-Fi聯(lián)盟標(biāo)準(zhǔn)開發(fā)下的Wi-Fi直連操作。解碼器130解釋通過無線通信單元140接收的RTP分組，并且解碼RTP分組中包含的圖像數(shù)據(jù)等。即，解碼器130解碼構(gòu)成圖像數(shù)據(jù)的多個(gè)幀圖像，并且將其提供給圖像分離單元120。這里每個(gè)幀圖像的宏塊不延伸跨越L圖像和R圖像，因此在一個(gè)宏塊中出現(xiàn)數(shù)據(jù)丟失時(shí)導(dǎo)致的受損可以限制到一個(gè)部分。例如，圖像分離單元120從通過解碼器130解碼的幀圖像分離L圖像和R圖像，并且交替地將L圖像和R圖像提供給顯示單元160。此外，可以從PC 20傳輸指示幀圖像內(nèi)L 圖像有效區(qū)域和R圖像有效區(qū)域的信息，并且圖像分離單元120可以根據(jù)該信息從幀圖像分離L圖像和R圖像?？刂茊卧?50控制顯示設(shè)備10的整體操作。例如，控制單元150控制通過無線通信單元140的無線通信、通過解碼器130的解碼處理、通過圖像分離單元120的圖像分離處理等。顯示單元160顯示從圖像分離單元120提供的L圖像和R圖像。而且，紅外發(fā)射器170發(fā)出用于控制快門眼鏡30的快門操作的控制信號(hào)?？扉T眼鏡30基于該快門控制信號(hào)，執(zhí)行R圖像傳輸單元32和L圖像傳輸單元34的打開/關(guān)閉操作。特別地，以這樣的方式執(zhí)行快門操作，使得L圖像傳輸單元34打開同時(shí)L圖像顯示在顯示單元160上，以及R 圖像傳輸單元32打開同時(shí)R圖像顯示在顯示單元160上。(幀圖像生成)這里將詳細(xì)描述通過圖像生成單元220的幀圖像的生成處理。例如，圖像生成單元220通過在垂直方向上相互相鄰安排L圖像和R圖像生成幀圖像。因?yàn)楦鶕?jù)AVC標(biāo)準(zhǔn)在一個(gè)幀圖像中只能定義一個(gè)有效像素區(qū)域，所以圖像生成單元 220使得L圖像和R圖像相互相鄰。而且，圖像生成單元220通過將啞數(shù)據(jù)插入到相互相鄰安排的L圖像和R圖像的上側(cè)和下側(cè)，使得L圖像和R圖像之間的邊界與宏塊的邊界一致， 所述宏塊是用于通過圖像編碼器231的圖像壓縮的單位。更特別地，圖像生成單元220可以通過以下過程插入啞數(shù)據(jù)。(I)通過將沿著垂直方向的L圖像或R圖像的像素?cái)?shù)量除以16(宏塊的像素?cái)?shù)量)，并且對(duì)除法結(jié)果的小數(shù)點(diǎn)四舍五入，來計(jì)算沿著垂直方向存儲(chǔ)L圖像或R圖像必需的宏塊的數(shù)量。(2)計(jì)算宏塊數(shù)量的兩倍值并且將其乘以16，16是宏塊的像素?cái)?shù)量。(3)將乘法結(jié)果和垂直方向上幀圖像的有效像素的數(shù)量之間的差，作為啞數(shù)據(jù)分發(fā)到上側(cè)和下側(cè)。這里，在垂直方向上有效像素的數(shù)量對(duì)于L圖像和R圖像相同的情況下，圖像生成單元220將啞數(shù)據(jù)相等地分發(fā)給上側(cè)和下側(cè)。另一方面，在垂直方向上有效像素的數(shù)量對(duì)于L圖像和R圖像不同的情況下，圖像生成單元220將更多啞數(shù)據(jù)分發(fā)給這樣的一側(cè)，在該側(cè)安排具有比另一側(cè)更少的有效像素的圖像。此外，當(dāng)通過在垂直方向上將L圖像和R圖像的組合圖像的像素?cái)?shù)量除以16，來計(jì)算存儲(chǔ)L圖像和R圖像的組合圖像必需的宏塊數(shù)量時(shí)，可以想到其中計(jì)算得到奇數(shù)的情況。 如果必需的宏塊數(shù)量為奇數(shù)，則將難以使得L圖像和R圖像之間的邊界與宏塊的邊界一致， 因此將沿著垂直方向存儲(chǔ)L圖像或R圖像必需的宏塊數(shù)量增加一倍是有效的，如上所述。此外，如果垂直方向上L圖像的有效像素的數(shù)量、和垂直方向上R圖像的有效像素的數(shù)量，每個(gè)是垂直方向上宏塊的像素?cái)?shù)量的整數(shù)倍，則即使不插入啞數(shù)據(jù)，L圖像和R圖像之間的邊界也將與宏塊的邊界一致。相應(yīng)地，本公開的實(shí)施例可以說對(duì)這樣的情況特別有效，其中在垂直方向上L圖像的有效像素?cái)?shù)量、或在垂直方向上R圖像的有效像素?cái)?shù)量， 都不是垂直方向上宏塊的像素?cái)?shù)量的整數(shù)倍，即在垂直方向上幀圖像的有效像素的數(shù)量， 不是垂直方向上宏塊的有效像素的數(shù)量的偶數(shù)倍的情況下。在下面，將參考圖9和10描述由這樣的圖像生成單元220生成的幀圖像的具體示例。圖9和10是示出由圖像生成單元220生成的幀圖像的具體示例的說明圖。在對(duì)于L圖像和R圖像在垂直方向上有效像素的數(shù)量為540的情況下，圖像生成單元220根據(jù)如上所述的過程，將相當(dāng)于4個(gè)像素的啞數(shù)據(jù)插入到L圖像的上側(cè)和R圖像的下側(cè)，如圖9 所示。結(jié)果，L圖像和R圖像之間的邊界與宏塊的邊界一致，如圖10所示。根據(jù)該配置，L圖像和R圖像可以相互獨(dú)立地壓縮。這使得即使在L圖像的下部是跨越多個(gè)幀圖像的靜態(tài)圖像，并且R圖像的上部包括運(yùn)動(dòng)的情況下，也能夠壓縮L圖像的下部，同時(shí)將其保持在靜態(tài)圖像的穩(wěn)定狀態(tài)。此外，在一個(gè)宏塊中出現(xiàn)數(shù)據(jù)丟失時(shí)引起的受損可以限制到一個(gè)部分。(3-2. PC和顯示設(shè)備的操作)在前面，已經(jīng)描述了本公開第一實(shí)施例的配置。接著，將參考圖11簡要描述根據(jù)第一實(shí)施例的顯示設(shè)備10和PC 20的操作。圖11是示出根據(jù)本公開第一實(shí)施例的顯示設(shè)備10和PC 20的操作的流程圖。如圖11所示，首先，PC 20的圖像生成單元220通過插入啞數(shù)據(jù)生成幀圖像，使得L圖像和R 圖像之間的邊界與宏塊的邊界一致(S310)。然后，PC 20的圖像編碼器231以宏塊為單位壓縮幀圖像(S320)，并且無線通信單元240將包含壓縮的幀圖像的RTP分組傳輸?shù)斤@示設(shè)備10 (S330)。然后，顯示設(shè)備10的解碼器130解碼壓縮的幀圖像(S340)，圖像分離單元120從幀圖像分離L圖像和R圖像(S350)，并且顯示單元160交替地顯示已經(jīng)通過圖像分離單元 120分離的L圖像和R圖像(S360)。
〈4.第二實(shí)施例〉在前面，已經(jīng)描述了本公開的第一實(shí)施例。在第一實(shí)施例中已經(jīng)描述了對(duì)于L圖像和R圖像根據(jù)上下方法安排的情況的處理，然而，如下面將描述為第二實(shí)施例的，本技術(shù)還可應(yīng)用于L圖像和R圖像根據(jù)并排方法安排的情況。具體地，例如圖像生成單元220通過在水平方向上相互相鄰地安排L圖像和R圖像，來生成幀圖像。此外，圖像生成單元220通過將啞數(shù)據(jù)插入到相互相鄰安排的L圖像和 R圖像的左側(cè)和右側(cè)，使得L圖像和R圖像之間的邊界與宏塊的邊界一致，所述宏塊是通過圖像編碼器231的圖像壓縮的單位。更特別地，圖像生成單元220可以通過以下過程插入啞數(shù)據(jù)。(I)通過將沿著水平方向的L圖像或R圖像的像素?cái)?shù)量除以16(宏塊的像素?cái)?shù)量)，并且對(duì)除法結(jié)果的小數(shù)點(diǎn)四舍五入，來計(jì)算沿著水平方向存儲(chǔ)L圖像或R圖像必需的宏塊的數(shù)量。(2)計(jì)算宏塊數(shù)量的兩倍值并且將其乘以16，16是宏塊的像素?cái)?shù)量。(3)將乘法結(jié)果和水平方向上幀圖像的有效像素的數(shù)量之間的差，作為啞數(shù)據(jù)分發(fā)到左側(cè)和右側(cè)。這里，在水平方向上有效像素的數(shù)量對(duì)于L圖像和R圖像相同的情況下，圖像生成單元220將啞數(shù)據(jù)相等地分發(fā)給左側(cè)和右側(cè)。另一方面，在水平方向上有效像素的數(shù)量對(duì)于L圖像和R圖像不同的情況下，圖像生成單元220將更多啞數(shù)據(jù)分發(fā)給這樣的一側(cè)，在該側(cè)安排具有比另一側(cè)更少的有效像素的圖像。此外，如果水平方向上L圖像的有效像素的數(shù)量、和水平方向上R圖像的有效像素的數(shù)量，每個(gè)是水平方向上宏塊的像素?cái)?shù)量的整數(shù)倍，則即使不插入啞數(shù)據(jù)，L圖像和R圖像之間的邊界也將與宏塊的邊界一致。相應(yīng)地，本公開的實(shí)施例可以說對(duì)這樣的情況特別有效，其中在水平方向上L圖像的有效像素?cái)?shù)量、或水平方向上R圖像的有效像素?cái)?shù)量，都不是水平方向上宏塊的像素?cái)?shù)量的整數(shù)倍，即在水平方向上幀圖像的有效像素的數(shù)量，不是水平方向上宏塊的有效像素的數(shù)量的偶數(shù)倍的情況下。在下面，將參考圖12和13描述由這樣的圖像生成單元220生成的幀圖像的具體示例。圖12和13是示出由圖像生成單元220生成的幀圖像的具體示例的說明圖。在對(duì)于L圖像和R圖像在水平方向上有效像素的數(shù)量為955的情況下，圖像生成單元220根據(jù)上述過程，將相當(dāng)于5個(gè)像素的啞數(shù)據(jù)插入到L圖像的左側(cè)和R圖像的右側(cè)，如圖12所示。 結(jié)果，L圖像和R圖像之間的邊界與宏塊的邊界一致，如圖13所示。根據(jù)該配置，L圖像和R圖像可以相互獨(dú)立地壓縮。這使得即使在L圖像的右部是跨越多個(gè)幀圖像的靜態(tài)圖像，并且R圖像的左部包括運(yùn)動(dòng)的情況下，也能夠壓縮L圖像的右部同時(shí)將其保持在靜態(tài)圖像的穩(wěn)定狀態(tài)。而且，在一個(gè)宏塊中出現(xiàn)數(shù)據(jù)丟失時(shí)引起的受損可以限制到一個(gè)部分。<5.結(jié)論〉如上所述，根據(jù)本公開實(shí)施例的圖像生成單元220通過以這樣的方式插入啞數(shù)據(jù)，使得L圖像和R圖像之間的邊界與宏塊的邊界一致，來生成幀圖像。根據(jù)該配置，L圖像和R圖像可以相互獨(dú)立地壓縮。而且，在一個(gè)宏塊中出現(xiàn)數(shù)據(jù)丟失時(shí)引起的受損可以限制到一個(gè)部分。本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，取決于設(shè)計(jì)需求和其他因素，可以出現(xiàn)各種修改、組合、子組合和更改，只要它們?cè)跈?quán)利要求或其等效的范圍內(nèi)。例如，根據(jù)本說明書的顯示設(shè)備10和PC 20的處理步驟沒有必要必需根據(jù)如流程圖所述的順序時(shí)序地處理。例如，顯示設(shè)備10和PC 20的處理步驟也可以按照不同于如流程圖所述的順序處理，或者可以并行地處理。此外，還可以創(chuàng)建這樣的計(jì)算機(jī)程序，用于使得顯示設(shè)備10和PC 20中嵌入的硬件(如CPU 20UROM 202或RAM 203)實(shí)現(xiàn)與上述顯示設(shè)備10和PC 20的每個(gè)元件等效的功能。本公開包含涉及于2011年I月13日向日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng)JP 2011-005015中公開的主題，在此通過引用并入其全部內(nèi)容。
1權(quán)利要求
1.一種圖像處理設(shè)備，包括幀圖像生成單元，用于生成其中第一圖像和第二圖像相互相鄰安排的幀圖像；以及壓縮處理單元，用于以宏塊為單位壓縮幀圖像，其中，幀圖像生成單元安排第一圖像和第二圖像，使得第一圖像和第二圖像之間的邊界與宏塊的邊界一致。
2.按照權(quán)利要求I所述的圖像處理設(shè)備，其中，幀圖像生成單元通過在安排方向上對(duì)第一圖像和第二圖像的兩側(cè)插入啞數(shù)據(jù)， 使得第一圖像和第二圖像之間的邊界與宏塊的邊界一致。
3.按照權(quán)利要求2所述的圖像處理設(shè)備，其中，幀圖像生成單元將存儲(chǔ)沿著安排方向的第一圖像或第二圖像所需的宏塊的數(shù)量的兩倍值乘以安排方向上的宏塊的像素?cái)?shù)量，以及將乘法結(jié)果和安排方向上幀圖像的有效像素的數(shù)量之間的差作為啞數(shù)據(jù)，分發(fā)給安排方向上幀圖像的兩側(cè)。
4.按照權(quán)利要求3所述的圖像處理設(shè)備，其中，幀圖像生成單元在沿著安排方向的第一圖像和第二圖像的有效像素的數(shù)量相同的情況下，將啞數(shù)據(jù)相等地分發(fā)給安排方向上幀圖像的兩側(cè)，以及在沿著安排方向的第一圖像和第二圖像的有效像素的數(shù)量不同的情況下，將更多啞數(shù)據(jù)分發(fā)給這樣的圖像的安排側(cè)，該側(cè)具有比另一側(cè)更少數(shù)量的有效像素。
5.按照權(quán)利要求4所述的圖像處理設(shè)備，還包括無線通信單元，用于無線傳輸已經(jīng)通過壓縮處理單元壓縮的幀圖像。
6.按照權(quán)利要求4所述的圖像處理設(shè)備，其中，安排方向上幀圖像的有效像素的數(shù)量與安排方向上宏塊的像素?cái)?shù)量的偶數(shù)倍不同。
7.按照權(quán)利要求5所述的圖像處理設(shè)備，其中第一圖像是用于左眼的圖像，并且第二圖像是用于右眼的圖像。
8.—種圖像處理方法，包括生成其中第一圖像和第二圖像相互相鄰安排的幀圖像；以及以宏塊為單位壓縮幀圖像，其中，在生成幀圖像的步驟中，安排第一圖像和第二圖像，使得第一圖像和第二圖像之間的邊界與宏塊的邊界一致。
9.一種使得計(jì)算機(jī)用作圖像處理設(shè)備的程序，該圖像處理設(shè)備包括幀圖像生成單元，用于生成其中第一圖像和第二圖像相互相鄰安排的幀圖像；以及壓縮處理單元，用于以宏塊為單位壓縮幀圖像，其中，幀圖像生成單元安排第一圖像和第二圖像，使得第一圖像和第二圖像之間的邊界與宏塊的邊界一致。
全文摘要
提供了一種圖像處理設(shè)備、圖像處理方法和程序，該圖像處理設(shè)備包括幀圖像生成單元，用于生成其中第一圖像和第二圖像相互相鄰安排的幀圖像；以及壓縮處理單元，用于以宏塊為單位壓縮幀圖像。幀圖像生成單元安排第一圖像和第二圖像，使得第一圖像和第二圖像之間的邊界與宏塊的邊界一致。
文檔編號(hào)H04N13/00GK102595162SQ20121001098
公開日2012年7月18日 申請(qǐng)日期2012年1月13日 優(yōu)先權(quán)日2011年1月13日
發(fā)明者山浦智也, 長良徹 申請(qǐng)人:索尼公司