多視點圖像處理設備及其圖像處理方法
【技術領域】
[0001]與示例性實施例一致的設備和方法涉及多視點圖像處理設備及其圖像處理方法。具體而言，示例性實施例涉及非眼鏡型多視點圖像處理設備及其圖像處理方法。
【背景技術】
[0002]隨著電子技術的發(fā)展，各種類型的電子裝置已經被開發(fā)并配銷。具體而言，諸如最常見的家用電子裝置之一的電視機(TV)的顯示設備近年來已經得到迅速的發(fā)展。
[0003]隨著顯示裝置的性能已經提高，由顯示裝置顯示的內容的類型已經多樣化。特別是，在現(xiàn)有技術中，用于觀看三維(3D)內容的立體顯示系統(tǒng)已經被開發(fā)并配銷。
[0004]現(xiàn)有技術立體顯示裝置可被實現(xiàn)為各種類型的顯示裝置，諸如，各種監(jiān)視器、蜂窩電話、個人數(shù)字助理(PDA)、個人計算機(PC)、機頂盒、平板PC、電子框、一體機等。現(xiàn)有技術立體顯示裝置也可被實現(xiàn)為家中的3D TV。此外，除了在家被使用外，3D顯示技術還可在需要3D成像的各種領域(諸如，科學、醫(yī)療、設計、教育、廣告、計算機游戲等)中被使用。
[0005]現(xiàn)有技術立體顯示系統(tǒng)可主要分為非眼鏡型系統(tǒng)和眼鏡型系統(tǒng)，其中，通過非眼鏡型系統(tǒng)可不用眼鏡觀看到圖像，通過眼鏡型系統(tǒng)可用眼鏡觀看到圖像。
[0006]雖然現(xiàn)有技術的眼鏡型系統(tǒng)提供了令人滿意的立體效果，但是用戶必須經歷配戴眼鏡的不便。在現(xiàn)有技術的非眼鏡型系統(tǒng)中，用戶無需眼鏡便可觀看3D圖像。因此，對非眼鏡型系統(tǒng)的開發(fā)已經增加。
[0007]現(xiàn)有技術非眼鏡類型系統(tǒng)向觀看者顯示多視點圖像，例如，N-視點圖像。因此，需要N個多視點圖像。由相機獲取N個多視圖圖像。然而，在N>2的情況下，在系統(tǒng)實現(xiàn)中獲得N個多視點圖像是困難的。
[0008]因此，現(xiàn)有技術非眼鏡型系統(tǒng)提取深度信息，并隨后當立體圖像被輸入時對多視點圖像進行渲染。然而，當輸入的立體圖像包括在屏顯示(OSD)信息時，難以在深度信息的提取期間從OSD區(qū)域得到準確的深度信息。因此，在OSD區(qū)域的深度信息中出現(xiàn)誤差。因此，所顯示的OSD圖像失真。

【發(fā)明內容】

[0009]技術問題
[0010]示例性實施例可提供多視點圖像處理設備及其圖像處理方法，其中，所述圖像處理方法校正三維(3D)圖像中的在屏顯示(OSD)區(qū)域的深度。因此，防止了圖像失真。
[0011]解決問題的方案
[0012]示例性實施例可克服以上缺點以及以上未描述的其它缺點。并且，示例性實施例不需要克服上述缺點。此外，示例性實施例可不克服上述問題中的任何問題。
[0013]根據(jù)示例性實施例的一方面，多視點圖像處理設備包括:深度提取器，被配置為提取三維(3D)輸入圖像的深度信息；深度校正器，被配置為基于提取出的深度信息和與3D輸入圖像中的在屏顯示(OSD)區(qū)域相應的OSD掩膜信息來校正3D輸入圖像中的OSD區(qū)域的深度;渲染裝置，被配置為使用3D輸入圖像和校正后的深度來對多視點圖像進行渲染。
[0014]深度提取器還可被配置為基于提取出的深度信息產生深度圖，深度校正器還可被配置為在深度圖中校正OSD區(qū)域的深度值。
[0015]深度校正器還可被配置為在深度圖中將OSD區(qū)域的深度值校正為第一深度值。
[0016]深度校正器還可被配置為在深度圖中將除了OSD區(qū)域之外的其余區(qū)域的多個深度值校正為第二深度值。
[0017]深度校正器還可被配置為在深度圖中將OSD區(qū)域的整個區(qū)域的深度值校正為O。
[0018]多視點圖像處理設備還可包括:顯示裝置，被配置為顯示包括多個OSD區(qū)域的3D輸入圖像;用戶接口裝置，被配置為接收用戶命令;控制器，被配置為控制深度校正器將根據(jù)用戶命令選擇的至少一個OSD區(qū)域的深度與3D圖像中的除了選擇的所述至少一個OSD區(qū)域之外的其余OSD區(qū)域的多個深度不同地進行校正。
[0019]控制器還可被配置為:控制深度校正器將選擇的所述至少一個OSD區(qū)域的深度校正為預設的第三深度值，并將除了選擇的所述至少一個OSD區(qū)域之外的其余OSD區(qū)域的所述多個深度校正為O。
[0020]根據(jù)示例性實施例的另一方面，處理多視點圖像的方法包括:提取三維(3D)輸入圖像的深度信息、基于提取出的深度信息和與3D輸入圖像中的在屏顯示(OSD)區(qū)域相應的OSD掩膜信息來校正3D輸入圖像中的在屏顯示(OSD)區(qū)域的深度，并使用3D輸入圖像和校正后的深度來對多視點圖像進行渲染。
[0021]提取深度信息的步驟可包括基于提取出的深度信息產生深度圖，校正深度的步驟可包括在深度圖中校正OSD區(qū)域的深度值。
[0022]校正深度的步驟可包括:在深度圖中將OSD區(qū)域的深度值校正為第一深度值。
[0023]校正深度的步驟可包括:在深度圖中將除了OSD區(qū)域之外的其余區(qū)域的多個深度值校正為第二深度值。
[0024]校正深度的步驟可包括:在深度圖中將OSD區(qū)域中的整個區(qū)域的深度值校正為O。
[0025]所述的方法還可包括:顯示包括多個OSD區(qū)域的3D輸入圖像，接收用于選擇多個OSD區(qū)域中的至少一個OSD區(qū)域的用戶命令，并將根據(jù)用戶命令選擇的所述至少一個OSD區(qū)域的深度與除了選擇的所述至少一個OSD區(qū)域之外的其余OSD區(qū)域的多個深度不同地進行校正。
[0026]校正深度的步驟可包括:將選擇的所述至少一個OSD區(qū)域的深度校正為預設的第三深度值，并將除了選擇的所述至少一個OSD區(qū)域之外的其余OSD區(qū)域的所述多個深度校正為O O
[0027]根據(jù)示例性實施例的另一方面，處理多視點圖像的方法包括:顯示包括至少一個內容區(qū)域的3D輸入圖像，將第一深度值應用于所述至少一個內容區(qū)域，并將第二深度值應用于除了所述至少一個內容區(qū)域之外的3D輸入?yún)^(qū)域。第一個深度值與第二深度值不同。
[0028]如上所述，根據(jù)各種實施例，非眼鏡型3D系統(tǒng)可防止3D圖像中OSD區(qū)域中的圖像失真。
[0029]示例性實施例的附加的和/或其它方面和優(yōu)點將在下面的描述中部分地被闡述，并且部分地將從描述中變得清楚，或者可通過示例性實施例的實踐而得知。
[0030]發(fā)明的有益效果
[0031]此外，根據(jù)各種實施例，非眼鏡型3D系統(tǒng)可執(zhí)行部分3D功能。
【附圖說明】
[0032]通過參照附圖描述特定的示例性實施例，示例性實施例的以上和/或其它方面將更加明顯，其中:
[0033]圖1是用于解釋非眼鏡三維(3D)顯示設備的操作的示例的示圖；
[0034]圖2A是示出根據(jù)實施例的多視點圖像處理設備的結構的框圖；
[0035]圖2B是示出根據(jù)實施例的多視點圖像處理設備的結構的框圖；
[0036]圖3是用于解釋根據(jù)實施例的示例性顯示單元的示圖；
[0037]圖4A和圖4B是用于解釋根據(jù)實施例的在屏顯示(OSD)掩膜信息的示圖；
[0038]圖5A至圖5C是用于解釋根據(jù)各種實施例的深度校正方法的示圖；
[0039]圖6是用于解釋根據(jù)另一實施例的深度校正方法的示圖；
[0040]圖7A和圖7B是用于解釋根據(jù)另一實施例的深度校正方法的示圖；
[0041 ]圖8A至圖8C是用于解釋根據(jù)另一實施例的深度校正方法的示圖；
[0042]圖9是用于解釋根據(jù)實施例的控制多視點圖像處理設備的方法的流程圖。
[0043]用于實施發(fā)明的最佳實施方式
【具體實施方式】
[0044]現(xiàn)在將參照附圖對特定示例性實施例進行更加詳細地描述。
[0045]圖1是用于解釋非眼鏡三維(3D)顯示設備的操作的示圖。
[0046]圖1是示出根據(jù)實施例的用于使用非眼鏡方式顯示多視點圖像并提供立體圖像的設備的操作。多視點圖像包括通過在不同角度捕捉對象而獲得的多個圖像。換句話說，多視點圖像是通過以不同角度折射在不同視點捕捉的多個圖像并在預定距離(即，視點距離(例如，大約3米))聚焦多個圖像而獲得的。形成這些圖像的位置被稱為視區(qū)。因此，當用戶的一只眼睛位于第一視區(qū)而用戶的另一只眼睛位于第二視區(qū)時，用戶可體驗立體效果。
[0047]例如，圖1是多視點圖像(例如，總共具有6個視點)的顯示操作的示圖。參照圖1，非眼鏡3D顯示設備允許與6個視點中的第一視點圖像相應的光到達左眼并允許與6個視點中的第二視點圖像相應的光到達右眼。因此，用戶可使用左眼和右眼觀看不同的視點圖像以體驗立體效果。
[0048]圖2是示出根據(jù)實施例的多視點圖像處理設備100的結構的框圖。
[0049]參照圖2A，多視點圖像處理設備100包括深度提取器110、深度校正器120、渲染單元130和控制器140。
[0050]圖像接收器(未示出)接收3D圖像信號。3D圖像可以是立體圖像。立體圖像包括通過在不同角度捕捉對象而獲得的兩個圖像，即，左眼圖像和右眼圖像。立體圖像可從各種源提供。例如，圖像接收器(未示出)可通過有線或無線地從諸如廣播頻道的源接收立體圖像。在這種情況下，圖像接收器(未示出)可包括諸如調諧器、解調器、均衡器等的各種組件。此夕卜，圖像接收器(未示出)可接收通過用于再現(xiàn)諸如數(shù)字視頻光盤(DVD)、藍光光盤、存儲卡等的各種介質的記錄介質再現(xiàn)單元再現(xiàn)的立體圖像，或者可直接接收通過相機捕捉的立體圖像。在這種情況下，圖像接收器(未示出)可包括諸如通用串口總線(USB)接口等的各種接口。圖像接收器(未示出)可從諸如網(wǎng)絡服務器的外部服務器接收立體圖像。另外，3D圖像可在2D-3D轉換方案中基于2D圖像產生，或者可以是具有3個或更多個視點的多視點圖像。省略