包裝彩色圖框及原始景深圖框的方法、裝置及系統(tǒng)的制作方法
【專利摘要】本發(fā)明公開一種包裝彩色圖框及原始景深圖框以得到包裝圖框的方法、裝置及系統(tǒng)。彩色圖框與原始景深圖框?qū)?yīng)，包裝圖框可于顯示屏幕中顯示，包裝彩色圖框及原始景深圖框的方法包括：重調(diào)原始景深圖框的尺寸，以得到尺寸重調(diào)景深圖框；以及組合彩色圖框及尺寸重調(diào)景深圖框，以得到包裝圖框，彩色圖框的中心顯示于顯示屏幕的中央?yún)^(qū)域。本發(fā)明不僅得到的包裝圖框可直接于2D顯示屏幕中顯示，而且人眼實(shí)際看到的2D影像相當(dāng)自然，不會產(chǎn)生不舒服的感覺。
【專利說明】包裝彩色圖框及原始景深圖框的方法、裝置及系統(tǒng)

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種包裝彩色圖框(color frame)及原始景深圖框(original depthframe)以得到包裝圖框(packed frame)的方法、裝置及系統(tǒng)。

【背景技術(shù)】
[0002]由于科技的進(jìn)步，如今電子產(chǎn)品的發(fā)展，沒有不以提升產(chǎn)品的性能及質(zhì)量為優(yōu)先考慮。其中，有關(guān)顯示裝置的設(shè)置，除了提供使用者更清晰、更舒適的顯示畫面之外，各家廠商不斷推出多種三維(three-dimens1nal, 3D)的顯示裝置,其可提供多視點(diǎn)的3D影像，以提供使用者另一種擬實(shí)境的視覺感受。
[0003]以現(xiàn)階段來說，一種3D影像生成系統(tǒng)是透過由原始的2D影像數(shù)據(jù)，即彩色圖框產(chǎn)生與該彩色圖框?qū)?yīng)的景深圖框(depth frame)，并透過現(xiàn)有的傳輸設(shè)備將彩色圖框與景深圖框傳送至使用者的3D顯示裝置。當(dāng)3D顯示裝置接收到彩色圖框與景深圖框之后可透過景深影像繪圖法(Depth-1mage-based Rendering, DIBR)而得到可供任何裸眼3D顯示裝置使用的兩個以上多視點(diǎn)影像，或是眼鏡式3D顯示裝置的左眼影像及右眼影像。
[0004]然而，目前接收端方面普遍的家用電視還是以2D顯示裝置為主，并無處理多視點(diǎn)影像或左右眼影像的功能，因此一般2D顯示裝置接受到3D影像訊號時，會顯示出左眼影像及右眼影像減半并拼接在一起的結(jié)果，或顯示出單視點(diǎn)單深度左右排列的結(jié)果。目前正值3D影像的發(fā)展期，廣播上述拼接方式或排列方式而于一般2D顯示裝置上直接顯示左、右眼影像減半拼接方式或單視點(diǎn)單深度左右排列的彩色圖框與景深圖框時，人眼實(shí)際看到的2D影像(彩色圖框)不僅相當(dāng)不自然，也會因無法專心聚焦于彩色圖框，產(chǎn)生不舒服的感覺。


【發(fā)明內(nèi)容】

[0005]本發(fā)明的目的為提供一種包裝彩色圖框及原始景深圖框以得到包裝圖框的方法、裝置及系統(tǒng)，不僅得到的包裝圖框可直接于2D顯示屏幕中顯示，而且人眼實(shí)際看到的2D影像相當(dāng)自然，不會產(chǎn)生不舒服的感覺。
[0006]為了達(dá)到上述目的，依據(jù)本發(fā)明的一種包裝彩色圖框及原始景深圖框以得到包裝圖框的方法，彩色圖框與原始景深圖框?qū)?yīng)，包裝圖框可于顯示屏幕中顯示，該方法包括:重調(diào)原始景深圖框的尺寸，以得到尺寸重調(diào)景深圖框；以及組合彩色圖框及尺寸重調(diào)景深圖框，以得到包裝圖框，其中，彩色圖框的中心是顯示于顯示屏幕的中央?yún)^(qū)域。
[0007]為了達(dá)到上述目的，依據(jù)本發(fā)明的一種包裝彩色圖框及原始景深圖框以得到包裝圖框的裝置，彩色圖框與原始景深圖框?qū)?yīng)，包裝圖框可于顯示屏幕中顯示，裝置包括尺寸處理單元以及組合處理單元。尺寸處理單元重調(diào)景深圖框的尺寸，以得到尺寸重調(diào)景深圖框。組合處理單元組合彩色圖框及尺寸重調(diào)景深圖框，以得到包裝圖框，其中，彩色圖框的中心是顯示于顯示屏幕的中央?yún)^(qū)域。
[0008]為了達(dá)到上述目的，依據(jù)本發(fā)明的一種包裝彩色圖框及原始景深圖框以得到包裝圖框的系統(tǒng)，彩色圖框與原始景深圖框?qū)?yīng)，包裝圖框可于顯示屏幕中顯示，系統(tǒng)包括存儲單元以及處理單元。存儲單元儲存彩色圖框及原始景深圖框。處理單元重調(diào)原始景深圖框的尺寸，以得到尺寸重調(diào)景深圖框，并組合彩色圖框及尺寸重調(diào)景深圖框，以得到包裝圖框，其中，彩色圖框的中心是顯示于顯示屏幕的中央?yún)^(qū)域。
[0009]承上所述，本發(fā)明的包裝彩色圖框及原始景深圖框以得到包裝圖框的方法、裝置及系統(tǒng)中，是借助組合彩色圖框及尺寸重調(diào)景深圖框，以得到中心顯示于顯示屏幕的中央?yún)^(qū)域的包裝圖框。借此，不僅將包裝圖框經(jīng)還原程序還原而得到原始彩色圖框或原始影深圖框后，再透過景深影像繪圖法就可提供3D顯示裝置正確產(chǎn)生例如裸眼多視點(diǎn)立體影像或眼鏡式雙視點(diǎn)立體影像，同時更重要的是，由于彩色圖框的中心顯示于顯示屏幕的中央?yún)^(qū)域，優(yōu)選是彩色圖框的中心點(diǎn)與顯示屏幕的中心點(diǎn)重疊，進(jìn)一步優(yōu)選是完全重疊，使得包裝圖框不僅可直接于2D顯示屏幕中顯示，且經(jīng)人眼實(shí)際觀看證明，看到的2D影像(即彩色圖框)也相當(dāng)自然，不會產(chǎn)生不舒服的感覺。
[0010]另外，因本發(fā)明公開的方法、裝置及系統(tǒng)中，包含重調(diào)原始景深圖框的尺寸以得到尺寸重調(diào)景深圖框，并組合彩色圖框及尺寸重調(diào)景深圖框，以得到精簡的包裝圖框，因此適合配合其它視訊壓縮系統(tǒng)而有提高壓縮效率的功效，并可將3D立體視訊所需頻寬要求降低，更有利于3D頻道的推廣。

【專利附圖】

【附圖說明】
[0011]圖1A為本發(fā)明優(yōu)選實(shí)施例的一種包裝彩色圖框及原始景深圖框的方法的流程示意圖。
[0012]圖1B為本發(fā)明優(yōu)選實(shí)施例的一種包裝彩色圖框及原始景深圖框的裝置的功能方塊不意圖。
[0013]圖2A至圖2D為第一實(shí)施例的一種原始景深圖框的處理過程示意圖。
[0014]圖3A及圖3B為第一實(shí)施例的一種原始彩色圖框的處理過程示意圖。
[0015]圖4A為第一實(shí)施例的包裝圖框的示意圖。
[0016]圖4B為將第一實(shí)施例的包裝圖框顯示于2D顯示裝置時，彩色圖框與顯示屏幕的相對示意圖。
[0017]圖4C為以包裝彩色圖框及原始景深圖框的方法及裝置所得到的另一個包裝圖框的影像示意圖。
[0018]圖4D為本發(fā)明實(shí)施例中顯示屏幕的中央?yún)^(qū)域的示意圖。
[0019]圖5A至圖為第二實(shí)施例的一種原始景深圖框的處理過程示意圖。
[0020]圖6A及圖6B為第二實(shí)施例的一種原始彩色圖框的處理過程示意圖。
[0021]圖7A為第二實(shí)施例的包裝圖框的示意圖。
[0022]圖7B為將第二實(shí)施例的包裝圖框顯示于2D顯示裝置時，彩色圖框與顯示屏幕的相對示意圖。
[0023]圖7C為以包裝彩色圖框及原始景深圖框的方法及裝置所得到的另一個包裝圖框的影像示意圖。
[0024]圖8為本發(fā)明優(yōu)選實(shí)施例另一個態(tài)樣的包裝彩色圖框及原始景深圖框的裝置的功能方塊不意圖。
[0025]圖9A至圖9D為第三實(shí)施例的一種原始景深圖框的處理過程示意圖。
[0026]圖1OA及圖1OB為第三實(shí)施例的一種原始彩色圖框的處理過程示意圖。
[0027]圖1lA為第三實(shí)施例的包裝圖框的示意圖。
[0028]圖1lB為將第三實(shí)施例的包裝圖框顯示于2D顯示裝置時，彩色圖框與顯示屏幕的相對示意圖。
[0029]圖1lC為以包裝彩色圖框及原始景深圖框的方法及裝置所得到的另一個包裝圖框的影像示意圖。
[0030]圖12為本發(fā)明優(yōu)選實(shí)施例的一種包裝彩色圖框及原始景深圖框的系統(tǒng)的功能方塊不意圖。

【具體實(shí)施方式】
[0031]以下將參照相關(guān)附圖，說明依本發(fā)明優(yōu)選實(shí)施例的包裝彩色圖框及原始景深圖框的方法、裝置及系統(tǒng)，其中相同的組件將以相同的參照符號加以說明。
[0032]請參照圖1A及圖1B所示，其中，圖1A為本發(fā)明優(yōu)選實(shí)施例的一種包裝彩色圖框及原始景深圖框以得到包裝圖框的方法的流程示意圖，而圖1B為本發(fā)明優(yōu)選實(shí)施例的一種包裝彩色圖框及原始景深圖框以得到包裝圖框的裝置I (以下簡稱裝置I)的功能方塊示意圖。應(yīng)用本發(fā)明所得到的包裝圖框可直接于顯示屏幕中顯示。在此，顯示屏幕為2D顯示裝置的顯示屏幕，而2D顯示裝置的分辨率例如但不限于為1920X1080畫素(pixels)。
[0033]如圖1A所示，包裝彩色圖框及原始景深圖框以得到包裝圖框的方法包括步驟SOl及步驟S02。另外，如圖1B所示，裝置I包括尺寸處理單元11以及組合處理單元12。此外，裝置I進(jìn)一步包括分割處理單元13及翻轉(zhuǎn)處理單元14。以下，請配合參照圖2A至圖4B，以說明包裝彩色圖框及原始景深圖框以得到包裝圖框的方法及裝置I的詳細(xì)內(nèi)容。
[0034]圖2A至圖2D為第一實(shí)施例的一種原始景深圖框的處理過程示意圖。其中，圖2A為原始景深圖框，圖2B為中間景深圖框，圖2C為尺寸重調(diào)景深圖框，而圖2D為分割及翻轉(zhuǎn)后的兩部分的尺寸重調(diào)景深圖框。另外，請參照圖3A至圖3B所示，圖3A及圖3B為第一實(shí)施例的一種原始彩色圖框的處理過程示意圖。其中，圖3A為原始彩色圖框，而圖3B為圖3A重調(diào)尺寸后的彩色圖框。
[0035]在本實(shí)施例中，彩色圖框是借助重調(diào)(resized)原始彩色圖框的尺寸而得到。其中，原始彩色圖框具有預(yù)設(shè)圖框尺寸，并例如但不限于為1920X1080畫素，此與目前高畫質(zhì)2D顯示裝置的影像分辨率相同。在此，原始景深圖框與原始彩色圖框的尺寸相同，均具有預(yù)設(shè)圖框尺寸。當(dāng)然，在其它的實(shí)施態(tài)樣中，預(yù)設(shè)圖框尺寸可以為不同數(shù)值。另外，圖標(biāo)中顯示列方向Dl及行方向D2，列方向Dl為顯示的圖框影像的水平方向，而行方向D2為顯示的圖框影像的垂直方向。此外，特別注意的一點(diǎn)是，雖然圖3A、圖3B顯示為黑白的影像，但實(shí)際上，圖3A及圖3B在彩色顯示裝置上可顯示為彩色影像。
[0036]原始景深圖框與原始彩色圖框?qū)?yīng)。在此，“對應(yīng)”表示，除了兩者的尺寸或分辨率相同之外，原始景深圖框是根據(jù)原始彩色圖框的所有對象的景深值而得到的，而且，將原始彩色圖框與原始景深圖框透過景深影像繪圖法(DIBR)便可合成可供3D顯示裝置播放的3D影像。由于原始景深圖框與原始彩色圖框?qū)?yīng)，因此原始景深圖框也與彩色圖框?qū)?yīng)。
[0037]首先，如圖1A所示，包裝彩色圖框及原始景深圖框以得到包裝圖框的方法的步驟SOl為:重調(diào)原始景深圖框的尺寸，以得到尺寸重調(diào)景深圖框(即由圖2A調(diào)整為圖2B)。其中，圖2A的原始景深圖框?yàn)榛译A圖框，因此其各畫素的次畫素值均具有相等的數(shù)值(具有相同灰階值)。其中，各畫素的數(shù)量可大于或等于2個。在此，各畫素例如分別具有三個次畫素R、G、B為例。
[0038]在步驟SOl中，在得到圖2C的尺寸重調(diào)景深圖框之前，本實(shí)施例在先重調(diào)圖2A的原始景深圖框的尺寸而得到圖2B的中間景深圖框之后，再將圖2B的中間景深圖框進(jìn)行次畫素重排列(subpixel rearrangement)而得到圖2C的尺寸重調(diào)景深圖框。其中，重調(diào)原始景深圖框的尺寸而得到中間景深圖框，是透過將原始景深圖框的尺寸降低比例，或透過將原始景深圖框的分辨率降低來達(dá)成。在本實(shí)施例中，是借助尺寸處理單元11按比例縮小(downscaling)圖2A的原始景深圖框而得到圖2B的中間景深圖框。在此，中間景深圖框的尺寸沿行方向D2縮小為原始景深圖框的四分之三，因此，中間景深圖框的尺寸為1920X 810 (810 = 1080X3/4)。
[0039]接著，進(jìn)行次畫素重排列。次畫素重排列取得中間景深圖框的三個畫素的兩個次畫素值，并分別將該等次畫素值對應(yīng)儲存于尺寸重調(diào)景深圖框的一個畫素的三個次畫素內(nèi)。在此，由于原始景深圖框?yàn)榛译A圖框，因此每一畫素中的三個次畫素值均相同，因此，各畫素可取其中的任意次畫素值為代表。
[0040]次畫素重排列是將中間景深圖框的三個畫素的次畫素值分別對應(yīng)儲存于尺寸重調(diào)景深圖框的一個畫素的三個次畫素內(nèi)。換句話說，是將中間景深圖框的第一畫素的次畫素值儲存于尺寸重調(diào)景深圖框的第一畫素的第一次畫素內(nèi)，并將中間景深圖框的第二畫素的次畫素值儲存于尺寸重調(diào)景深圖框的第一畫素的第二次畫素內(nèi)，再將中間景深圖框的第三畫素的次畫素值儲存于尺寸重調(diào)景深圖框的第一畫素的第三次畫素內(nèi)，以此類推。在此，可將圖2B的中間景深圖框沿行方向D2縮小尺寸為原來的三分之一，而得到圖2C的尺寸重調(diào)景深圖框，其分辨率為1920X270(270 = 810X1/3)。
[0041]因此，本實(shí)施例圖2C的尺寸重調(diào)景深圖框的尺寸沿行方向D2為原始景深圖框的四分之一(3/4X1/3)。由于使用次畫素重排列的技術(shù)，使得中間景深圖框的三行畫素的灰階值可以儲存于尺寸重調(diào)景深圖框的一個畫素的三個次畫素內(nèi)，因此相較于原始景深圖框，尺寸重調(diào)景深圖框具有編碼效率高的優(yōu)點(diǎn)，同時也可降低數(shù)據(jù)量，應(yīng)用于傳輸時，可提高傳輸效率。
[0042]因?yàn)榇萎嬎刂嘏帕袝沟脠D框縮小，因此也可以稱之為“次畫素壓縮重排列(subpixel packing rearrangement)”。
[0043]另外，重調(diào)原始彩色圖框的尺寸而得到彩色圖框，是透過將原始彩色圖框的尺寸降低比例，或透過將原始彩色圖框的分辨率降低來達(dá)成。在本實(shí)施例中，是由尺寸處理單元11縮小圖3A的原始彩色圖框而得到圖3B的彩色圖框。在此，圖3B的彩色圖框的尺寸沿行方向D2按比例縮小尺寸為原始彩色圖框的四分之三。換句話說，本實(shí)施例中，是將圖3A的原始彩色圖框沿行方向D2等比例縮小尺寸為原來的四分之三，而得到圖3B的彩色圖框，因此，彩色圖框的分辨率為1920X810(810 = 1080X3/4)。不過，在其它的實(shí)施例中，縮小尺寸可以為其它不同比例，或者也可沿列方向Dl縮小尺寸，或同時沿行方向D2及列方向Dl縮小尺寸，本發(fā)明并不特別限制。
[0044]在得到彩色圖框及尺寸重調(diào)景深圖框之后，再進(jìn)行步驟S02:組合彩色圖框及尺寸重調(diào)景深圖框，以得到包裝圖框。不過，在借助組合處理單元12組合彩色圖框及尺寸重調(diào)景深圖框的步驟S02中，本實(shí)施例需先利用分割處理單元13將尺寸重調(diào)景深圖框水平平均分割(splitting)為兩部分(沿列方向Dl分割)，之后，再利用翻轉(zhuǎn)處理單元14分別翻轉(zhuǎn)(flipping)此兩部分，而得到圖2D的兩部分(每一部分的尺寸為1920X 135)，再將經(jīng)翻轉(zhuǎn)后的尺寸重調(diào)景深圖框的兩部分透過組合處理單元12分別組合于彩色圖框的上側(cè)及下偵牝而得到圖4A的包裝圖框。在此，翻轉(zhuǎn)是表示轉(zhuǎn)動180度，使上下顛倒。本實(shí)施例分割后的尺寸重調(diào)景深圖框的兩部分的尺寸相同。
[0045]請參照圖4B所示，其是將第一實(shí)施例的包裝圖框顯示于2D顯示裝置時，彩色圖框與顯示屏幕的相對示意圖。
[0046]如果將包裝圖框經(jīng)還原程序還原而得到原始彩色圖框或原始影深圖框后，再透過景深影像繪圖法就可提供3D顯示裝置正確產(chǎn)生裸眼多視點(diǎn)立體影像或眼鏡式雙視點(diǎn)立體影像之外，同時，如圖4B所示，包裝圖框可直接顯示于2D顯示裝置的顯示屏幕中，且彩色圖框的中心點(diǎn)(即彩色圖框?qū)蔷€的交點(diǎn))與顯示屏幕的中心點(diǎn)(即顯示屏幕對角線的交點(diǎn))為重疊(均為中心點(diǎn)O)。因此，包裝圖框不僅可直接于2D顯示屏幕中顯示，且如圖4A所示，經(jīng)由人眼實(shí)際觀看證明，看到的彩色圖框(即2D影像)相當(dāng)?shù)淖匀唬容^不會產(chǎn)生不舒服的感覺。當(dāng)然，為達(dá)到人眼觀看2D顯示屏幕不會有不舒服感覺，除上述中心點(diǎn)重疊之夕卜，經(jīng)試驗(yàn)結(jié)果得知，當(dāng)彩色圖框的中心顯示于顯示屏幕的中央?yún)^(qū)域時，即可提供一定的效果。在此，所稱的中央?yún)^(qū)域包括顯示屏幕的中心點(diǎn)及其向外延伸一定畫素?cái)?shù)量所成的范圍。中央?yún)^(qū)域可以例如為圓形或四邊形。舉例來說，請參考圖4C所示，其為本發(fā)明實(shí)施例中將包裝圖框顯示于2D顯示裝置時，顯示屏幕的中央?yún)^(qū)域的示意圖。在圖4D中，顯示屏幕的中央?yún)^(qū)域CA為包括其屏幕中心點(diǎn)O并向外延伸而達(dá)屏幕尺寸的例如三分之一的范圍，當(dāng)彩色圖框的中心落于此區(qū)域時，對于觀看者不會產(chǎn)生不舒適的感覺。
[0047]另外，再一提的是，在第一實(shí)施例中，圖4A的包裝圖框的尺寸與圖3A的原始彩色圖框的預(yù)設(shè)圖框尺寸相同，都是1920X1080(1080 = 135+810+135)。由于現(xiàn)有的技術(shù)在原始彩色圖框與原始景深圖框的排列上都是使用單視點(diǎn)單深度左右排列方式，因此會使排列后的影像分辨率為原來的2倍而造成傳輸頻寬上的負(fù)擔(dān)，但是經(jīng)上述包裝彩色圖框及原始景深圖框所得到包裝圖框的方法及裝置I所包裝后的包裝圖框的尺寸與原始彩色圖框(或原始景深圖框)相同，都是1920X1080。另外，上述包裝彩色圖框及原始景深圖框以得到包裝圖框的方法、裝置可配合任何視訊壓縮方法，以具有優(yōu)選壓縮效率，應(yīng)用于傳輸時，包裝圖框不會造成傳輸頻寬上負(fù)擔(dān)，也不會因解壓縮運(yùn)算量過大而造成使用者的3D顯示裝置無法負(fù)荷。
[0048]另外，請參照圖5A至圖所示，圖5A至圖為第二實(shí)施例的一種原始景深圖框的處理過程示意圖。其中，圖5A為原始景深圖框，圖5B為中間景深圖框，圖5C為尺寸重調(diào)景深圖框，而圖為分割及翻轉(zhuǎn)后的兩部分的尺寸重調(diào)景深圖框。另外，請參照圖6A至圖6B所不，圖6A及圖6B為第二實(shí)施例的一種原始彩色圖框的處理過程不意圖。其中，圖6A為原始彩色圖框，而圖6B為圖6A重調(diào)尺寸后的彩色圖框。
[0049]圖5A至圖的處理程序與圖2A至圖2D相同，但保持圖框的高度(1080)不變，并沿列方向Dl進(jìn)行圖框的尺寸重調(diào)。其中，圖5C的尺寸重調(diào)景深圖框的尺寸沿列方向Dl為圖5A的原始景深圖框的四分之一(480X1080)，再將經(jīng)垂直平均分割及翻轉(zhuǎn)后的尺寸重調(diào)景深圖框的兩部分(240X 1080，圖5D)透過組合處理單元12分別組合于圖6B的水平方向縮小四分之三的彩色圖框(1440X1080)的左側(cè)及右側(cè)，而得到圖7A的包裝圖框以及圖7B的包裝圖框于顯示屏幕中的顯示情形。
[0050]在其它的實(shí)施例中，也可同時沿行方向D2及列方向Dl縮小尺寸。另外，景深圖框及彩色圖框縮小尺寸也可以為其它不同比例。此外，如果彩色圖框的尺寸沿方向縮小為原始彩色圖框的a倍，而中間景深圖框的尺寸沿同一方向縮小為原始景深圖框的b倍時，則只要滿足a+b/3= I即可，本發(fā)明并不特別限制a及b的值。前述第一實(shí)施例中，中間景深圖框沿行方向D2的縮小比例與彩色圖框沿行方向D2的縮小比例相同，即a = b = 3/4，而第二實(shí)施例中，中間景深圖框沿列方向Dl的縮小比例與彩色圖框沿列方向Dl的縮小比例也相問，也為a = b = 3/4。
[0051]特別一提的是，上述實(shí)施例的彩色圖框是由重調(diào)原始彩色圖框的尺寸而得到。不過，在其它的實(shí)施例中，也可直接將彩色圖框與尺寸重調(diào)景深圖框的兩部分進(jìn)行組合，而得到不同尺寸的包裝圖框。另外，上述的尺寸處理單元11、組合處理單元12、分割處理單元13及翻轉(zhuǎn)處理單元14可以軟件程序來實(shí)現(xiàn)其功能，并借助處理器(例如MCU)來執(zhí)行。
[0052]上述的軟件程序只是舉例，相關(guān)的技術(shù)人員可依照上述的說明寫出不同的程序組合?；蛘?，也可應(yīng)用硬件或固件的方式來實(shí)現(xiàn)上述的尺寸處理單元11、組合處理單元12、分割處理單元13及翻轉(zhuǎn)處理單元14的功能，本發(fā)明并不限制。
[0053]另外，請參照圖4C或圖7C所示，其為以包裝彩色圖框及原始景深圖框的方法及裝置I所得到的另一個包裝圖框的影像示意圖。其尺寸分別為1920X1080。
[0054]由圖4C或圖7C可看出，經(jīng)由人眼實(shí)際觀看證明，看到的彩色圖框中的人物影像相當(dāng)?shù)淖匀?，不會產(chǎn)生不舒服的感覺。
[0055]另外，請參照圖8所示，其為本發(fā)明優(yōu)選實(shí)施例另一態(tài)樣的包裝彩色圖框及原始景深圖框的裝置la(以下簡稱裝置Ia)的功能方塊示意圖。
[0056]與圖1B的裝置I主要的不同在于，裝置Ia包括轉(zhuǎn)動處理單元14a，不包括翻轉(zhuǎn)處理單元14。
[0057]請?jiān)賲⒄請D1A及圖8,并配合圖9A至圖1lA所示，以說明包裝彩色圖框及原始景深圖框以得到包裝圖框的方法及裝置的第三實(shí)施例的詳細(xì)內(nèi)容。圖9A至圖9D為第三實(shí)施例的一種原始景深圖框的處理過程示意圖。其中，圖9A為原始景深圖，圖9B為中間景深圖框，圖9C為尺寸重調(diào)景深圖框，而圖9D為分割及旋轉(zhuǎn)后的兩部分的尺寸重調(diào)景深圖框。另夕卜，圖1OA及圖1OB為第三實(shí)施例的一種原始彩色圖框的處理過程示意圖。其中，圖1OA為原始彩色圖框，而圖1OB為圖1OA重調(diào)尺寸后的彩色圖框。在第三實(shí)施例中，仍以與第一實(shí)施例相同的原始景深圖框與原始彩色圖框來說明，因此圖9A與圖2A相同、圖1OA與圖3A相同。
[0058]在步驟SOl中，重調(diào)原始景深圖框的尺寸，以得到尺寸重調(diào)景深圖框(由圖9A至圖9C)。在步驟SOl中，在得到圖9C的尺寸重調(diào)景深圖框之前，本實(shí)施例在先重調(diào)圖9A的原始景深圖框的尺寸而得到圖9B的中間景深圖框之后，再將中間景深圖框進(jìn)行次畫素重排列而得到圖9C的尺寸重調(diào)景深圖框。在此，是借助尺寸處理單元11按比例縮小圖9A的原始景深圖框而得到圖9B的中間景深圖框。其中，是將圖9A的原始景深圖框沿行方向D2的尺寸縮小為原來的三分之二，并沿列方向Dl的尺寸縮小為原來的十六分之九，以得到圖9B的中間景深圖框，因此中間景深圖框的分辨率為1080X720(1080 = 1920X9/16,720 =1080X2/3)。另外，次畫素重排列的內(nèi)容已于上述中詳述，不再贅述。因此，本實(shí)施例經(jīng)由次畫素重排列后，可將圖9B的中間景深圖框的尺寸沿行方向D2縮小為原來的三分之一，以得到圖9C的尺寸重調(diào)景深圖框的分辨率為1080X240(240 = 720X1/3)。因此圖9C的尺寸重調(diào)景深圖框的尺寸沿行方向D2為原始景深圖框的九分之二(1/3X1/3)，沿列方向Dl為原始景深圖框的十六分之九。
[0059]另外，本實(shí)施例是由尺寸處理單元11將圖1OA的原始彩色圖框縮小而得到圖1OB的彩色圖框。在此，圖1OB的彩色圖框的尺寸沿列方向Dl按比例縮小尺寸為圖1OA的原始彩色圖框的八分之七，因此，彩色圖框的分辨率為1680X1080(1680 = 1920X7/8)。
[0060]在得到彩色圖框及尺寸重調(diào)景深圖框之后，再進(jìn)行步驟S02:組合彩色圖框及尺寸重調(diào)景深圖框，以得到包裝圖框。不過，在借助組合處理單元12組合彩色圖框及尺寸重調(diào)景深圖框的步驟S02中，本實(shí)施例需先利用分割處理單元13將圖9C的尺寸重調(diào)景深圖框水平平均分割為兩部分(在此是沿列方向Dl分割)之后，再利用轉(zhuǎn)動處理單元14a分別旋轉(zhuǎn)(rotating)此兩部分，而得到如圖9D的兩部分(每一部分的尺寸均為120X1080)，再將經(jīng)旋轉(zhuǎn)后的尺寸重調(diào)景深圖框的兩部分透過組合處理單元12分別組合于彩色圖框的左側(cè)及右側(cè)，而得到圖1lA的包裝圖框。在此，旋轉(zhuǎn)為順時針旋轉(zhuǎn)90度。因此，由圖1lA的包裝圖框可看出，本實(shí)施例的包裝圖框的尺寸與原始彩色圖框的預(yù)設(shè)圖框尺寸相同，仍是1920X1080(1920 = 120+1680+120)。
[0061]另外，請參照圖1lB所示，其是將第三實(shí)施例的包裝圖框顯示于2D顯示裝置時，彩色圖框與顯示屏幕的相對示意圖。
[0062]如果將包裝圖框經(jīng)還原程序還原而得到原始彩色圖框或原始影深圖框后，再透過景深影像繪圖法就可提供3D顯示裝置正確產(chǎn)生裸眼多視點(diǎn)立體影像或眼鏡式雙視點(diǎn)立體影像之外，同時，如圖1lB所示，包裝圖框可直接顯示于2D顯示裝置的顯示屏幕中，且彩色圖框的中心點(diǎn)(即彩色圖框?qū)蔷€的交點(diǎn))與顯示屏幕的中心點(diǎn)(即顯示屏幕對角線的交點(diǎn))為重疊(均為中心點(diǎn)O)。因此，包裝圖框不僅可直接于2D顯示屏幕中顯示，且如圖1lA所示，經(jīng)由實(shí)際的人眼觀看證明，看到的彩色圖框(即2D影像)相當(dāng)?shù)淖匀唬脖容^不會產(chǎn)生不舒服的感覺。當(dāng)然，如前述實(shí)施例，為了達(dá)到相同的效果，也可以使彩色圖框的中心被顯示于顯示屏幕的中央?yún)^(qū)域即可，不以中心點(diǎn)重疊為限。
[0063]另外，再一提的是，在第三實(shí)施例中，圖1lA的包裝圖框的尺寸與圖1OA的原始彩色圖框的預(yù)設(shè)圖框尺寸相同，都是1920X1080(1080 = 135+810+135)，因此與第一實(shí)施例相同，經(jīng)包裝彩色圖框及原始景深圖框的方法及裝置Ia所包裝后的包裝圖框可配合任何視訊壓縮方法，并具有優(yōu)選壓縮效率，應(yīng)用于傳輸時，不會造成傳輸頻寬上負(fù)擔(dān)，也不會因解壓縮運(yùn)算量過大而造成使用者的3D顯示裝置無法負(fù)荷。
[0064]另外，在第三實(shí)施例中，是將圖9A的原始景深圖框沿列方向Dl重調(diào)與其高度相同(寬度由1920調(diào)整為1080)。如果原始彩色圖框沿列方向Dl的縮小比例為C，原始彩色圖框的高度不調(diào)整，而原始景深圖框沿行方向D2的縮小比例為d時，需滿足c+(原始高度/原始寬度)X (d/3) = I即可，本發(fā)明并不特別限制縮小比例c及d的值。在上述第三實(shí)施例中，c = 7/8,且 d = 2/3ο
[0065]另外，請參照圖1lC所示，其為以包裝彩色圖框及原始景深圖框的方法及裝置Ia所得到的另包裝圖框的影像示意圖。
[0066]圖1lC的尺寸仍為1920X1080。由圖1lC可看出，經(jīng)由人眼實(shí)際觀看證明，看到的彩色圖框中的人物影像相當(dāng)?shù)淖匀唬粫a(chǎn)生不舒服的感覺。
[0067]接著，請參照圖12所示，其為本發(fā)明優(yōu)選實(shí)施例的一種包裝彩色圖框及原始景深圖框的系統(tǒng)2(以下簡稱系統(tǒng)2)的功能方塊示意圖。
[0068]系統(tǒng)2包括存儲單元21以及處理單元22，存儲單元21與處理單元22電性連接。存儲單元21儲存彩色圖框及原始景深圖框，當(dāng)然，存儲單元21也可用以儲存尺寸重調(diào)景深圖框及其兩部分、中間景深圖框、包裝圖框或原始彩色圖框。其中，存儲單元21可為非瞬時計(jì)算機(jī)可讀取記錄介質(zhì)(non-transitory computer readable storage medium),并例如可為內(nèi)存、記憶卡、光盤片、錄像帶、計(jì)算機(jī)磁帶，或其任意組合，以儲存信息。其中，內(nèi)存可包含只讀存儲器(ROM)、隨機(jī)存取存儲器(RAM)、閃存(Flash)、或現(xiàn)場可編程門陣列(Field-Programmable Gate Array, FPGA),或其它形式的內(nèi)存，并不限定。
[0069]處理單元22可包含系統(tǒng)2的核心控制組件，例如可包含至少一個中央處理器及內(nèi)存，或包含其它控制硬件、軟件或固件。其中，處理單元22重調(diào)原始景深圖框的尺寸，以得到中間景深圖框，并將中間景深圖框進(jìn)行次畫素重排列，以得到尺寸重調(diào)景深圖框。另外，在實(shí)施例中，處理單元22進(jìn)一步分割尺寸重調(diào)景深圖框?yàn)閮刹糠郑⒊叽缰卣{(diào)景深圖框的兩部分分別組合于彩色圖框的上側(cè)及下側(cè)，以得到包裝圖框。在此，在將尺寸重調(diào)景深圖框的兩部分分別組合于彩色圖框的上側(cè)及下側(cè)之前，處理單元22進(jìn)一步分別翻轉(zhuǎn)尺寸重調(diào)景深圖框的兩部分。
[0070]另外，在另一個實(shí)施例中，處理單元22進(jìn)一步分割尺寸重調(diào)景深圖框?yàn)閮刹糠郑覍⒊叽缰卣{(diào)景深圖框的兩部分分別組合于彩色圖框的左側(cè)及右側(cè)，以得到包裝圖框。在此，在將尺寸重調(diào)景深圖框的兩部分分別組合于彩色圖框的左側(cè)及右側(cè)之前，處理單元22進(jìn)一步分別旋轉(zhuǎn)尺寸重調(diào)景深圖框的兩部分。此外，處理單元22進(jìn)一步重調(diào)原始彩色圖框的尺寸而得到彩色圖框。
[0071]另外，彩色圖框的中心是顯示于顯示屏幕的中央?yún)^(qū)域，且優(yōu)選是彩色圖框的中心點(diǎn)與顯示屏幕的中心點(diǎn)重疊。其中，顯示屏幕為2D顯示屏幕。此外，原始景深圖框、中間景深圖框、尺寸重調(diào)景深圖框、彩色圖框、原始彩色圖框及包裝圖框的其它技術(shù)特征已于上述中詳述，不再贅述。
[0072]綜上所述，因本發(fā)明的包裝彩色圖框及原始景深圖框以得到包裝圖框的方法、裝置及系統(tǒng)中，組合彩色圖框及尺寸重調(diào)景深圖框，以得到彩色圖框的中心被顯示于顯示屏幕的中央?yún)^(qū)域的包裝圖框。借此，不僅將包裝圖框經(jīng)還原程序還原而得到原始彩色圖框或原始影深圖框后，再透過景深影像繪圖法就可提供3D顯示裝置正確產(chǎn)生例如裸眼多視點(diǎn)立體影像或眼鏡式雙視點(diǎn)立體影像，同時更重要的是，由于彩色圖框的中心顯示于顯示屏幕的中央?yún)^(qū)域，優(yōu)選的是彩色圖框的中心點(diǎn)與顯示屏幕的中心點(diǎn)重疊，進(jìn)一步優(yōu)選的是完全重疊，使得包裝圖框不僅可直接于2D顯示屏幕中顯示，且經(jīng)人眼實(shí)際觀看證明，看到的2D影像(即彩色圖框)也相當(dāng)自然，不會產(chǎn)生不舒服的感覺。
[0073]另外，因本發(fā)明公開的方法、裝置及系統(tǒng)中，包含重調(diào)原始景深圖框的尺寸以得到尺寸重調(diào)景深圖框，并組合彩色圖框及尺寸重調(diào)景深圖框，以得到精簡的包裝圖框，因此適合配合其它視訊壓縮系統(tǒng)而有提高壓縮效率的功效，并可將3D立體視訊所需頻寬要求降低，更有利于3D頻道的推廣。
[0074]以上所述僅為舉例性，而不是限制性的。任何未脫離本發(fā)明的精神與范圍，而對其進(jìn)行的等效修改或變更，均應(yīng)包含于隨附的權(quán)利要求范圍中。
【權(quán)利要求】
1.一種包裝彩色圖框及原始景深圖框以得到包裝圖框的方法，所述彩色圖框與所述原始景深圖框?qū)?yīng)，所述包裝圖框可于顯示屏幕中顯示，所述方法包括: 重調(diào)所述原始景深圖框的尺寸，以得到尺寸重調(diào)景深圖框；以及 組合所述彩色圖框及所述尺寸重調(diào)景深圖框，以得到所述包裝圖框， 其中，所述彩色圖框的中心是顯示于所述顯示屏幕的中間區(qū)域。
2.根據(jù)權(quán)利要求1所述的方法，其中所述彩色圖框的中心點(diǎn)與所述顯示屏幕的中心點(diǎn)重疊。
3.根據(jù)權(quán)利要求1所述的方法，進(jìn)一步包括: 重調(diào)所述原始景深圖框的尺寸，以得到中間景深圖框 '及 將所述中間景深圖框進(jìn)行次畫素重排列，以得到所述尺寸重調(diào)景深圖框。
4.根據(jù)權(quán)利要求3所述的方法，其中所述尺寸重調(diào)景深圖框的尺寸沿行方向?yàn)樗鲋虚g景深圖框的三分之一。
5.根據(jù)權(quán)利要求3所述的方法，其中所述尺寸重調(diào)景深圖框具有多個畫素，各所述畫素具有三個次畫素，所述等次畫素分別對應(yīng)儲存所述中間景深圖框的三個畫素的次畫素值。
6.根據(jù)權(quán)利要求1所述的方法，其中所述組合步驟包括: 將所述尺寸重調(diào)景深圖框分割為兩部分；以及 分別組合所述兩部份于所述彩色圖框的上側(cè)及下側(cè)。
7.根據(jù)權(quán)利要求6所述的方法，其中所述組合所述兩部份于所述彩色圖框的上側(cè)及下側(cè)的步驟包括: 相對于所述尺寸重調(diào)景深圖框翻轉(zhuǎn)所述兩部份。
8.根據(jù)權(quán)利要求1所述的方法，其中所述組合步驟包括: 將所述尺寸重調(diào)景深圖框分割為兩部分；以及 分別組合所述兩部份于所述彩色圖框的左側(cè)及右側(cè)。
9.根據(jù)權(quán)利要求8所述的方法，其中所述組合所述兩部份于所述彩色圖框的左側(cè)及右側(cè)的步驟包括: 相對于所述尺寸重調(diào)景深圖框旋轉(zhuǎn)所述兩部份。
10.根據(jù)權(quán)利要求3所述的方法，進(jìn)一步包含: 重調(diào)原始彩色圖框的尺寸以得到所述彩色圖框。
11.根據(jù)權(quán)利要求10所述的方法，其中所述原始彩色圖框具有預(yù)設(shè)圖框尺寸，所述包裝圖框的尺寸與所述預(yù)設(shè)圖框尺寸相同。
12.根據(jù)權(quán)利要求10所述的方法，其中所述彩色圖框的尺寸沿方向縮小為所述原始彩色圖框的a倍，所述中間景深圖框的尺寸沿所述方向縮小為所述原始景深圖框的b倍。
13.根據(jù)權(quán)利要求12所述的方法，其中a與b需滿足a+b/3= I。
14.根據(jù)權(quán)利要求12所述的方法，其中a與b的值分別為四分之三。
15.一種包裝彩色圖框及原始景深圖框以得到包裝圖框的裝置，所述彩色圖框與所述原始景深圖框?qū)?yīng)，所述包裝圖框可于顯示屏幕中顯示，所述裝置包括: 尺寸處理單元，重調(diào)所述景深圖框的尺寸，以得到尺寸重調(diào)景深圖框；以及 組合處理單元，組合所述彩色圖框及所述尺寸重調(diào)景深圖框，以得到所述包裝圖框， 其中，所述彩色圖框的中心是顯示于所述顯示屏幕的中央?yún)^(qū)域。
16.根據(jù)權(quán)利要求15所述的裝置，其中所述彩色圖框的中心點(diǎn)與所述顯示屏幕的中心點(diǎn)重疊。
17.根據(jù)權(quán)利要求15所述的裝置，其中所述尺寸處理單元是重調(diào)所述原始景深圖框的尺寸，以得到中間景深圖框，并將所述中間景深圖框進(jìn)行次畫素重排列，以得到所述尺寸重調(diào)景深圖框。
18.根據(jù)權(quán)利要求17所述的裝置，其中所述尺寸重調(diào)景深圖框的尺寸沿行方向?yàn)樗鲋虚g景深圖框的三分之一。
19.根據(jù)權(quán)利要求17所述的裝置，其中所述尺寸重調(diào)景深圖框具有多個畫素，各所述畫素具有三個次畫素，所述等次畫素分別對應(yīng)儲存所述中間景深圖框的三個畫素的次畫素值。
20.根據(jù)權(quán)利要求15所述的裝置，進(jìn)一步包括: 分割處理單元，分割所述尺寸重調(diào)景深圖框?yàn)閮刹糠?，且所述組合處理單元將所述尺寸重調(diào)景深圖框的所述兩部分分別組合于所述彩色圖框的上側(cè)及下側(cè)，以得到所述包裝圖框。
21.根據(jù)權(quán)利要求20所述的裝置，進(jìn)一步包括: 翻轉(zhuǎn)處理單元，是于將所述尺寸重調(diào)景深圖框的所述兩部分分別組合于所述彩色圖框的上側(cè)及下側(cè)之前，分別翻轉(zhuǎn)所述尺寸重調(diào)景深圖框的所述兩部分。
22.根據(jù)權(quán)利要求15所述的裝置，進(jìn)一步包括: 分割處理單元，分割所述尺寸重調(diào)景深圖框?yàn)閮刹糠?，且所述組合處理單元是將所述尺寸重調(diào)景深圖框的所述兩部分分別組合于所述彩色圖框的左側(cè)及右側(cè)，以得到所述包裝圖框。
23.根據(jù)權(quán)利要求22所述的裝置，進(jìn)一步包括: 轉(zhuǎn)動處理單元，是于將所述尺寸重調(diào)景深圖框的所述兩部分分別組合于所述彩色圖框的左側(cè)及右側(cè)之前，分別旋轉(zhuǎn)所述尺寸重調(diào)景深圖框的所述兩部分。
24.根據(jù)權(quán)利要求17所述的裝置，其中所述尺寸處理單元更重調(diào)原始彩色圖框的尺寸而得到所述彩色圖框。
25.根據(jù)權(quán)利要求24所述的裝置，其中所述原始彩色圖框具有預(yù)設(shè)圖框尺寸，所述包裝圖框的尺寸與所述預(yù)設(shè)圖框尺寸相同。
26.根據(jù)權(quán)利要求24所述的裝置，其中所述彩色圖框的尺寸沿方向縮小為所述原始彩色圖框的a倍，所述中間景深圖框的尺寸沿所述方向縮小為所述原始景深圖框的b倍。
27.根據(jù)權(quán)利要求26所述的裝置，其中a與b需滿足a+b/3= I。
28.根據(jù)權(quán)利要求26所述的裝置，其中a與b的值分別為四分之三。
29.一種包裝彩色圖框及原始景深圖框以得到包裝圖框的系統(tǒng)，所述彩色圖框與所述原始景深圖框?qū)?yīng)，所述包裝圖框可于顯示屏幕中顯示，所述系統(tǒng)包括: 存儲單元，儲存所述彩色圖框及所述原始景深圖框；以及 處理單元，重調(diào)所述原始景深圖框的尺寸，以得到尺寸重調(diào)景深圖框，并組合所述彩色圖框及所述尺寸重調(diào)景深圖框，以得到所述包裝圖框， 其中，所述彩色圖框的中心是顯示于所述顯示屏幕的中央?yún)^(qū)域。
30.根據(jù)權(quán)利要求29所述的系統(tǒng)，其中所述彩色圖框的中心點(diǎn)與所述顯示屏幕的中心點(diǎn)重疊。
31.根據(jù)權(quán)利要求29所述的系統(tǒng)，其中所述處理單元是重調(diào)所述原始景深圖框的尺寸，以得到中間景深圖框，并將所述中間景深圖框進(jìn)行次畫素重排列，以得到所述尺寸重調(diào)景深圖框。
32.根據(jù)權(quán)利要求31所述的系統(tǒng)，其中所述尺寸重調(diào)景深圖框的尺寸沿行方向?yàn)樗鲋虚g景深圖框的三分之一。
33.根據(jù)權(quán)利要求31所述的系統(tǒng)，其中所述尺寸重調(diào)景深圖框具有多個畫素，各所述畫素具有三個次畫素，所述等次畫素分別對應(yīng)儲存所述中間景深圖框的三個畫素的次畫素值。
34.根據(jù)權(quán)利要求29所述的系統(tǒng)，其中所述處理單元進(jìn)一步分割所述尺寸重調(diào)景深圖框?yàn)閮刹糠?，并將所述尺寸重調(diào)景深圖框的所述兩部分分別組合于所述彩色圖框的上側(cè)及下側(cè)，以得到所述包裝圖框。
35.根據(jù)權(quán)利要求34所述的系統(tǒng)，其中在將所述尺寸重調(diào)景深圖框的所述兩部分分別組合于所述彩色圖框的上側(cè)及下側(cè)之前，所述處理單元進(jìn)一步分別翻轉(zhuǎn)所述尺寸重調(diào)景深圖框的所述兩部分。
36.根據(jù)權(quán)利要求29所述的系統(tǒng)，其中所述處理單元進(jìn)一步分割所述尺寸重調(diào)景深圖框?yàn)閮刹糠?，且將所述尺寸重調(diào)景深圖框的所述兩部分分別組合于所述彩色圖框的左側(cè)及右側(cè)，以得到所述包裝圖框。
37.根據(jù)權(quán)利要求36所述的系統(tǒng)，其中在將所述尺寸重調(diào)景深圖框的所述兩部分分別組合于所述彩色圖框的左側(cè)及右側(cè)之前，所述處理單元進(jìn)一步分別旋轉(zhuǎn)所述尺寸重調(diào)景深圖框的所述兩部分。
38.根據(jù)權(quán)利要求31所述的系統(tǒng)，其中所述處理單元進(jìn)一步重調(diào)原始彩色圖框的尺寸而得到所述彩色圖框。
39.根據(jù)權(quán)利要求38所述的系統(tǒng)，其中所述原始彩色圖框具有預(yù)設(shè)圖框尺寸，所述包裝圖框的尺寸與所述預(yù)設(shè)圖框尺寸相同。
40.根據(jù)權(quán)利要求38所述的系統(tǒng)，其中所述彩色圖框的尺寸沿方向縮小為所述原始彩色圖框的a倍，所述中間景深圖框的尺寸沿所述方向縮小為所述原始景深圖框的b倍。
41.根據(jù)權(quán)利要求40所述的系統(tǒng)，其中a與b需滿足a+b/3= I。
42.根據(jù)權(quán)利要求40所述的系統(tǒng)，其中a與b的值分別為四分之三。
【文檔編號】H04N13/00GK104519337SQ201410519493
【公開日】2015年4月15日 申請日期:2014年9月30日 優(yōu)先權(quán)日:2013年10月2日
【發(fā)明者】楊家輝, 王泓民, 曾喜駿, 廖恪應(yīng) 申請人:惟成科技有限公司