用于三維（3d）圖像的圖像處理設(shè)備和方法
【專利摘要】提供一種用于三維（3D）圖像的圖像處理設(shè)備和方法。所述圖像處理設(shè)備可包括：參數(shù)設(shè)置單元，用于設(shè)置與彩色圖像有關(guān)的第一參數(shù)；參數(shù)確定單元，用于使用第一參數(shù)來確定與深度圖像有關(guān)的最佳的第二參數(shù)。
【專利說明】用于三維(3D)圖像的圖像處理設(shè)備和方法
[0001]本申請要求于2012年6月4日提交到韓國知識產(chǎn)權(quán)局的第10-2012-0059789號韓國專利申請的優(yōu)先權(quán)利益，本申請的公開通過引用合并于此。
【技術(shù)領(lǐng)域】
[0002]示例實施例涉及一種用于三維(3D)圖像的圖像處理設(shè)備和方法，更具體地說，涉及一種可在保持相同比特量的同時提高用于3D圖像的合成圖像的質(zhì)量的設(shè)備和方法。
【背景技術(shù)】
[0003]可通過合成彩色圖像和深度圖像來產(chǎn)生三維(3D)圖像。也就是，可通過經(jīng)由合成彩色圖像和深度圖像而獲得的合成圖像來實現(xiàn)3D圖像。因此，可發(fā)送深度圖像來重現(xiàn)3D圖像。
[0004]在此情況下，彩色圖像和深度圖像可影響合成圖像的質(zhì)量。因此，會需要使彩色圖像和深度圖像的質(zhì)量的惡化最小化。同時，會需要保持彩色圖像和深度圖像的最佳比特量。
[0005]也就是，期望一種當確定發(fā)送彩色圖像和深度圖像所需的比特量時，可使中間圖像的質(zhì)量保持在預(yù)定水平的圖像處理方法。

【發(fā)明內(nèi)容】

[0006]通過提供一種圖像處理設(shè)備來實現(xiàn)前述和/或其它方面，其中，所述圖像處理設(shè)備包括:參數(shù)設(shè)置單元，用于設(shè)置與彩色圖像有關(guān)的第一參數(shù)；參數(shù)確定單元，用于使用第一參數(shù)來確定與深度圖有關(guān)的最佳的第二參數(shù)。
[0007]參數(shù)確定單元可基于在彩色圖像和深度圖像之間的關(guān)系來確定第二參數(shù)。
[0008]參數(shù)確定單元可使用通過合成深度圖像和彩色圖像而獲得的合成圖像的失真函數(shù)來確定第二參數(shù)。
[0009]參數(shù)確定單元可針對相同比特量確定滿足與彩色圖像的失真的變化和深度圖像的失真的變化有關(guān)的條件的第二參數(shù)。
[0010]參數(shù)確定單元可針對多個幀中的每個幀或針對每個圖像組(GOP)變化地確定第二參數(shù)。
[0011]通過提供一種圖像處理設(shè)備來實現(xiàn)前述和/或其它方面，其中，所述圖像處理設(shè)備包括:失真設(shè)置單元，用于設(shè)置與合成圖像的失真有關(guān)的彩色圖像的失真和深度圖像的失真；參數(shù)確定單元，用于基于彩色圖像的失真和深度圖像的失真來確定用于深度圖像的
量化參數(shù)。
[0012]參數(shù)確定單元可針對相同比特量確定用于深度圖像的量化參數(shù)，其中，所述用于深度圖像的量化參數(shù)滿足與彩色圖像的失真的變化和深度圖像的失真的變化有關(guān)的條件。
[0013]深度圖像的失真可與通過合成彩色圖像和深度圖像而獲得的合成圖像的失真相應(yīng)。
[0014]通過提供一種圖像處理方法來實現(xiàn)前述和/或其它方面，其中，所述圖像處理方法包括:設(shè)置與彩色圖像有關(guān)的第一參數(shù)；使用第一參數(shù)確定與深度圖像有關(guān)的最佳的第
二參數(shù)。
[0015]通過提供一種圖像處理方法來實現(xiàn)前述和/或其它方面，其中，所述圖像處理方法包括:設(shè)置與合成圖像的失真有關(guān)的彩色圖像的失真和深度圖像的失真；基于彩色圖像的失真和深度圖像的失真來確定用于深度圖像的量化參數(shù)。
[0016]通過提供一種圖像處理方法來實現(xiàn)前述和/或其它方面，其中，所述圖像處理方法包括:確定與彩色圖像的第一量化參數(shù)相應(yīng)的用于深度圖像的最佳的第二量化參數(shù)；使用第一量化參數(shù)對彩色圖像進行量化，并對彩色圖像進行編碼；使用第二量化參數(shù)對深度圖像進行量化，并對深度圖像進行編碼。
[0017]通過提供一種圖像處理方法來實現(xiàn)前述和/或其它方面，其中，所述圖像處理方法包括:確定與彩色圖像的第一量化參數(shù)相應(yīng)的用于深度圖像的最佳的第二量化參數(shù)；使用第一量化參數(shù)對彩色圖像進行量化，并對彩色圖像進行編碼；使用第二量化參數(shù)對深度圖像進行量化，并對深度圖像進行編碼；產(chǎn)生包括編碼的彩色圖像、編碼的深度圖像、第一量化參數(shù)和第二量化參數(shù)的比特流。
[0018]通過提供一種圖像處理方法來實現(xiàn)前述和/或其它方面，其中，所述圖像處理方法包括:從比特流提取編碼的彩色圖像和編碼的深度圖像；確定與彩色圖像的第一量化參數(shù)相應(yīng)的用于深度圖像的最佳的第二量化參數(shù)；對編碼的彩色圖像進行解碼，并基于第一量化參數(shù)對解碼的彩色圖像進行反量化；對編碼的深度圖像進行解碼，并基于第二量化參數(shù)對解碼的深度圖像進行反量化。
[0019]通過提供一種圖像處理方法來實現(xiàn)前述和/或其它方面，其中，所述圖像處理方法包括:從比特流提取編碼的彩色圖像、編碼的深度圖像、與編碼的彩色圖像有關(guān)的第一量化參數(shù)和與編碼的深度圖像有關(guān)的第二量化參數(shù)；對編碼的彩色圖像進行解碼，并基于第一量化參數(shù)對解碼的彩色圖像進行反量化；對編碼的深度圖像進行解碼，并基于第二量化參數(shù)對解碼的深度圖像進行反量化。這里，可基于第一量化參數(shù)來確定第二量化參數(shù)。
[0020]實施例的另外的方面將在以下描述中部分地進行闡述，并將部分地從所述描述變得清楚，或可通過本公開的實施而被了解。
【專利附圖】

【附圖說明】
[0021]從以下結(jié)合附圖對實施例的描述，這些和/或其它方面將變得清楚和更易于理解，其中:
[0022]圖1示出根據(jù)示例實施例的圖像處理設(shè)備的操作；
[0023]圖2示出根據(jù)示例實施例的圖像處理設(shè)備的配置；
[0024]圖3示出根據(jù)其它示例實施例的圖像處理設(shè)備的配置；
[0025]圖4示出根據(jù)示例實施例的根據(jù)彩色圖像的量化參數(shù)的變化以及深度圖像的量化參數(shù)的變化的失真的變化；
[0026]圖5示出根據(jù)示例實施例的圖像處理方法；
[0027]圖6示出根據(jù)其它示例實施例的圖像處理方法；
[0028]圖7示出根據(jù)示例實施例的應(yīng)用圖像處理方法的編碼處理；
[0029]圖8示出根據(jù)示例實施例的應(yīng)用圖像處理方法的解碼處理?！揪唧w實施方式】
[0030]現(xiàn)在將詳細地參照實施例,在附圖中示出了實施例的示例，其中，相同參考標號始終指示相同元件。以下通過參照附圖描述實施例來解釋本公開。
[0031]圖1示出根據(jù)示例實施例的圖像處理設(shè)備的操作。
[0032]參照圖1，編碼設(shè)備101可包括圖像處理設(shè)備103。類似于編碼設(shè)備101，解碼設(shè)備102可包括圖像處理設(shè)備104。
[0033]為了針對三維(3D)圖像，通過合成彩色圖像和深度圖像來產(chǎn)生中間圖像，圖像處理設(shè)備103和圖像處理設(shè)備104可確定當中間圖像的質(zhì)量被設(shè)置時使用的量化參數(shù)。在此情況下，可基于彩色圖像的失真和深度圖像的失真來確定中間圖像的質(zhì)量。也就是，隨著彩色圖像的失真和深度圖像的失真增加，中間圖像的質(zhì)量會降低。具體地，可基于將要應(yīng)用于彩色圖像和深度圖像的量化參數(shù)來改變這種失真。隨著量化參數(shù)變大，失真會增加，而壓縮所需的比特量會相反地減少。
[0034]當產(chǎn)生3D圖像時，圖像處理設(shè)備103和圖像處理設(shè)備104可確定最佳量化參數(shù)，以便產(chǎn)生具有預(yù)定水平質(zhì)量的中間圖像，并同時提高編碼效率。
[0035]這里，第一參數(shù)和第二參數(shù)可不限于量化參數(shù)，并可與對彩色圖像和深度圖像的質(zhì)量有影響的任何參數(shù)相應(yīng)。其中，第二參數(shù)可作為用于在保持合成圖像的質(zhì)量的同時提高編碼效率的最佳參數(shù)。以下，為了解釋的目的并作為示例，將基于量化參數(shù)來提供示例實施例。
[0036]圖2示出根據(jù)示例實施例的圖像處理設(shè)備200的配置。
[0037]參照圖2，圖像處理設(shè)備200可包括參數(shù)設(shè)置單元(參數(shù)設(shè)置器)201和參數(shù)確定單元(參數(shù)確定器)202。
[0038]參數(shù)設(shè)置單元201可設(shè)置與彩色圖像有關(guān)的第一參數(shù)。這里，第一參數(shù)可與當壓縮彩色圖像時將使用的量化參數(shù)相應(yīng)。
[0039]參數(shù)確定單元202可使用第一參數(shù)確定與深度圖像有關(guān)的最佳的第二參數(shù)。這里，第二參數(shù)可與當壓縮深度圖像時將使用的量化參數(shù)相應(yīng)。
[0040]由于在深度圖像和彩色圖像之間的對應(yīng)關(guān)系相對較高，因此可通過分析彩色圖像和深度圖像之間的對應(yīng)關(guān)系來確定與用于彩色圖像的量化參數(shù)有關(guān)的用于深度圖像的最佳量化參數(shù)。因此，參數(shù)確定單元202可基于彩色圖像和深度圖像之間的對應(yīng)關(guān)系來確定
第二參數(shù)。
[0041]具體地，參數(shù)確定單元202可使用通過合成深度圖像和彩色圖像而獲得的合成圖像的失真函數(shù)來確定第二參數(shù)。在此情況下，可基于彩色圖像的失真和深度圖像的失真來確定合成圖像的失真函數(shù)。
[0042]參數(shù)確定單元202可針對相同比特量確定滿足與彩色圖像的失真的變化和深度圖像的失真的變化有關(guān)的條件的第二參數(shù)。將參照圖4詳細地描述參數(shù)確定單元202的操作。
[0043]例如，參數(shù)確定單元202可針對多個幀中的每個幀或針對每個圖像組(GOP)變化地確定第二參數(shù)。也就是，參數(shù)確定單元202可按照預(yù)定時間間隔確定第二參數(shù)。因此，確定參數(shù)的處理可適于例如針對實時廣播等需要圖像的快速處理的情況。[0044]圖3示出根據(jù)其它示例實施例的圖像處理裝置300的配置。
[0045]參照圖3，圖像處理設(shè)備300可包括失真設(shè)置單元(失真設(shè)置器)301和參數(shù)確定單元(參數(shù)確定器)302。
[0046]失真設(shè)置單元301可設(shè)置與合成圖像的失真有關(guān)的彩色圖像的失真和深度圖像的失真。這里，可通過組合彩色圖像的失真和深度圖像的失真來確定合成圖像的失真。
[0047]參數(shù)確定單元302可基于彩色圖像的失真和深度圖像的失真，確定用于深度圖像的量化參數(shù)。例如，參數(shù)確定單元302可針對相同比特量確定滿足與彩色圖像的失真的變化和深度圖像的失真的變化有關(guān)的條件的量化參數(shù)。在此情況下，深度圖像的失真可與通過合成彩色圖像和深度圖像而獲得的合成圖像的失真相應(yīng)。[0048]圖4示出根據(jù)示例實施例的根據(jù)彩色圖像的量化參數(shù)的變化和深度圖像的量化參數(shù)的變化的失真的變化。
[0049]參照圖4，可假設(shè)彩色圖像的量化參數(shù)QPc是固定的，并且深度圖像的量化參數(shù)QPd是可變的。圖像處理設(shè)備可確定用于深度圖像的最佳量化參數(shù)，其中，所述最佳量化參數(shù)可在保持合成圖像的質(zhì)量的同時提高編碼效率。在此情況下，用于深度圖像的最佳量化參數(shù)可位于圖4中示出的曲線上。這里，所述曲線可指示最佳比特量被分配給彩色圖像和深度圖像的情況。
[0050]如等式I中所示，可得出針對3D圖像，通過合成彩色圖像和深度圖像而獲得的合成圖像的失真。
【權(quán)利要求】
1.一種圖像處理設(shè)備，包括: 參數(shù)設(shè)置單元，用于設(shè)置與彩色圖像有關(guān)的第一參數(shù)； 參數(shù)確定單元，用于使用第一參數(shù)來確定與深度圖像有關(guān)的最佳的第二參數(shù)。
2.如權(quán)利要求1所述的設(shè)備，其中， 第一參數(shù)與當壓縮彩色圖像時將使用的量化參數(shù)相應(yīng)， 第二參數(shù)與當壓縮深度圖像時將使用的量化參數(shù)相應(yīng)。
3.如權(quán)利要求1所述的設(shè)備，其中，參數(shù)確定單元基于在彩色圖像和深度圖像之間的關(guān)系來確定第二參數(shù)。
4.如權(quán)利要求1所述的設(shè)備，其中，參數(shù)確定單元使用通過合成深度圖像和彩色圖像而獲得的合成圖像的失真函數(shù)來確定第二參數(shù)。
5.如權(quán)利要求1所述的設(shè)備，其中，參數(shù)確定單元針對相同比特量確定滿足與彩色圖像的失真的變化和深度圖像的失真的變化有關(guān)的條件的第二參數(shù)。
6.如權(quán)利要 求1所述的設(shè)備，其中，參數(shù)確定單元針對多個幀中的每個幀或針對每個圖像組(GOP)變化地確定第二參數(shù)。
7.一種圖像處理設(shè)備，包括: 失真設(shè)置單元，用于設(shè)置與合成圖像的失真有關(guān)的彩色圖像的失真和深度圖像的失真； 參數(shù)確定單元，用于基于彩色圖像的失真和深度圖像的失真來確定用于深度圖像的量化參數(shù)。
8.如權(quán)利要求7所述的設(shè)備，其中，參數(shù)確定單元針對相同比特量確定滿足與彩色圖像的失真的變化和深度圖像的失真的變化有關(guān)的條件的用于深度圖像的量化參數(shù)。
9.如權(quán)利要求7所述的設(shè)備，其中，深度圖像的失真與通過合成彩色圖像和深度圖像而獲得的合成圖像的失真相應(yīng)。
10.一種圖像處理方法，包括: 設(shè)置與彩色圖像有關(guān)的第一參數(shù)； 使用第一參數(shù)來確定與深度圖像有關(guān)的最佳的第二參數(shù)。
11.如權(quán)利要求10所述的方法，其中， 第一參數(shù)與當壓縮彩色圖像時將使用的量化參數(shù)相應(yīng)， 第二參數(shù)與當壓縮深度圖像時將使用的量化參數(shù)相應(yīng)。
12.如權(quán)利要求10所述的方法，其中，確定第二參數(shù)的步驟包括:基于彩色圖像和深度圖像之間的關(guān)系來確定第二參數(shù)。
13.如權(quán)利要求10所述的方法，其中，確定第二參數(shù)的步驟包括:使用通過合成深度圖像和彩色圖像而獲得的合成圖像的失真函數(shù)來確定第二參數(shù)。
14.如權(quán)利要求10所述的方法，其中，確定第二參數(shù)的步驟包括:針對相同比特量確定滿足與彩色圖像的失真的變化和深度圖像的失真的變化有關(guān)的條件的第二參數(shù)。
15.如權(quán)利要求10所述的方法，其中，確定第二參數(shù)的步驟包括:針對多個幀中的每個幀或針對每個圖像組(GOP)變化地確定第二參數(shù)。
16.如權(quán)利要求11所述的方法，其中，第一參數(shù)是固定的，第二參數(shù)是可改變的。
17.—種圖像處理方法,包括:設(shè)置與合成圖像的失真有關(guān)的彩色圖像的失真和深度圖像的失真； 基于彩色圖像的失真和深度圖像的失真來確定用于深度圖像的量化參數(shù)。
18.如權(quán)利要求17所述的方法，其中，確定量化參數(shù)的步驟包括:針對相同比特量確定滿足與彩色圖像的失真的變化和深度圖像的失真的變化有關(guān)的條件的用于深度圖像的量化參數(shù)。
19.如權(quán)利要求18所述的方法，其中，深度圖像的失真與通過合成彩色圖像和深度圖像而獲得的合成圖像的失真相應(yīng)。
20.—種圖像處理方法，包括: 確定與彩色圖像的第一量化參數(shù)相應(yīng)的用于深度圖像的最佳的第二量化參數(shù)； 使用第一量化參數(shù)對彩色圖像進行量化，并對彩色圖像進行編碼； 使用第二量化參數(shù)對深度圖像進行量化，并對深度圖像進行編碼。
21.—種圖像處理方法，包括: 確定與彩色圖像的第一量化參數(shù)相應(yīng)的用于深度圖像的最佳的第二量化參數(shù)； 使用第一量化參數(shù)對彩色圖像進行量化，并對彩色圖像進行編碼； 使用第二量化參數(shù)對深度圖像進行量化，并對深度圖像進行編碼； 產(chǎn)生包括編碼的彩色圖像、編碼的深度圖像、第一量化參數(shù)和第二量化參數(shù)的比特流。
22.—種圖像處理方法，包括: 從比特流提取編碼的彩色圖像和編碼的深度圖像； 確定與彩色圖像的第一量化參數(shù)相應(yīng)的用于深度圖像的最佳的第二量化參數(shù)； 對編碼的彩色圖像進行解碼，并基于第一量化參數(shù)對解碼的彩色圖像進行反量化； 對編碼的深度圖像進行解碼，并基于第二量化參數(shù)對解碼的深度圖像進行反量化。
23.一種圖像處理方法，包括: 從比特流提取編碼的彩色圖像、編碼的深度圖像、與編碼的彩色圖像有關(guān)的第一量化參數(shù)和與編碼的深度圖像有關(guān)的第二量化參數(shù)； 對編碼的彩色圖像進行解碼，并基于第一量化參數(shù)對解碼的彩色圖像進行反量化； 對編碼的深度圖像進行解碼，并基于第二量化參數(shù)對解碼的深度圖像進行反量化， 其中，基于第一量化參數(shù)來確定第二量化參數(shù)。
【文檔編號】G06T9/00GK103456033SQ201310218460
【公開日】2013年12月18日 申請日期:2013年6月4日 優(yōu)先權(quán)日:2012年6月4日
【發(fā)明者】吳秉泰, 樸斗植, 李在濬 申請人:三星電子株式會社