專利名稱：視頻處理裝置和視頻處理方法
技術(shù)領(lǐng)域：
本發(fā)明有關(guān)于將多視角視頻流(multi-view video stream)轉(zhuǎn)換為偏振視頻流(polarized video stream),特別是有關(guān)于一種根據(jù)多視角視頻流(例如,載有左眼圖像與右眼圖像的立體/三維視頻流)與從所述多視角視頻流所取得的移動信息來產(chǎn)生偏振視頻流的裝置與方法。
背景技術(shù)：
隨著科技的進步，使用者所追求的不再只是高畫質(zhì)影像，而是具立體感且更真實感的影像顯示。目前立體影像顯示的技術(shù)主要可分為兩種，即，一種需要視頻輸出裝置一并搭配眼鏡(例如紅藍眼鏡、偏光眼鏡或快門眼鏡)使用，而另一種則僅需要視頻輸出裝置而無需搭配任何眼鏡。無論是采用哪一種技術(shù)，立體影像顯示的主要原理就是讓左眼與右眼分別看到不同的影像畫面，進而使大腦將兩眼所分別看到的不同的影像畫面視為立體影像?？扉T眼鏡被使用者廣泛地用在觀賞通過影像輸出裝置來呈現(xiàn)的立體圖像?？扉T眼鏡包括兩片快門鏡片，并且通過適當(dāng)?shù)乜刂瓶扉T鏡片在開啟狀態(tài)與關(guān)閉狀態(tài)之間切換，來允許使用者的左眼看到左眼圖像、使用者的右眼看到右眼圖像。然而，由于快門眼鏡需要安裝控制器來控制快門眼鏡的狀態(tài)以及需要電池模組來供應(yīng)電源給控制器與快門眼鏡，因此快門眼鏡的成本不低。由于基于偏振的立體影像顯示技術(shù)具有較低的制造成本，故可以被采用。舉例來說，為了將立體影像播放在使用者所觀看的面板上，一種基于偏振的方法是使用相位延遲薄膜(pattern retarder, PR)型或是微相位差膜(micro retarder)型的面板，因此,原本的一個立體視頻流(其包括左眼圖像與右眼圖像)應(yīng)被轉(zhuǎn)換為一個偏振視頻流，以被適當(dāng)?shù)夭シ旁谙辔谎舆t薄膜型/微相位差膜型的面板上來呈現(xiàn)立體圖像給使用者。傳統(tǒng)的方法是提取左眼圖像中一半的掃描線與右眼圖像中一半的掃描線，并且通過結(jié)合所提取的掃描線來產(chǎn)生偏振視頻巾貞(polarized video frame)。然而,通過此偏振視頻流所驅(qū)動的相位延 遲薄膜型/微相位差膜型的面板上所播放出來的立體圖像的解析度(resolution)會減少為通過原本的立體視頻流所驅(qū)動的面板上所播放出來的立體圖像的解析度的一半。為了提高偏振立體影像顯示的解析度，可以在時域(temporal)上采用較快的幀速率(frame rate)，也就是說，在立體視頻流所包括的左眼幀與右眼幀的原本幀周期(例如，1/60秒)中，偏振視頻流包括不只一個幀。用來在時域上達到較快的幀速率的現(xiàn)有技術(shù)是通過匯集一對左眼圖像與右眼圖像的偶掃描線來產(chǎn)生一幀，并且通過匯集同一對左眼圖像與右眼圖像的奇掃描線來產(chǎn)生另一幀。然而，由于固定的掃描線選取順序，現(xiàn)有技術(shù)只對在特定方向上具有移動(motion)的幀會有好的播放品質(zhì)，而對于在其他方向上具有移動的幀或是不具有移動的靜態(tài)幀，采用較快的幀速率的偏振影像顯示會產(chǎn)生畫面閃爍(flicker)的問題并且具有不好的播放品質(zhì)。

發(fā)明內(nèi)容
由此，本發(fā)明的目的為提供一種根據(jù)多視角視頻流(例如，載有左眼圖像與右眼圖像的立體/三維視頻流)與從所述多視角視頻流所取得的移動信息來產(chǎn)生偏振視頻流的裝置與方法，以解決上述問題。—種視頻處理裝置的范例實施方式，用以根據(jù)多視角視頻流來產(chǎn)生偏振視頻流，包括移動信息檢測器以及偏振轉(zhuǎn)換器。所述移動信息檢測器通過處理所述多視角視頻流來檢測所述多視角視頻流的移動信息。所述偏振轉(zhuǎn)換器耦接于所述移動信息檢測器，且根據(jù)所述移動信息來將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流。一種視頻處理方法的范例實施方式,用以根據(jù)多視角視頻流來產(chǎn)生偏振視頻流，包括通過處理所述多視角視頻流來檢測所述多視角視頻流的移動信息；以及根據(jù)所述移動信息來將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流。 本發(fā)明所公開的視頻處理裝置和視頻處理方法，基于多視角視頻流的移動信息來將多視角視頻流轉(zhuǎn)換為偏振視頻流，能夠改善立體影像或三維影像的播放品質(zhì)。對于已經(jīng)閱讀后續(xù)由各附圖及內(nèi)容所顯示的較佳實施方式的本領(lǐng)域的技術(shù)人員來說，本發(fā)明的各目的是明顯的。


圖I為本發(fā)明視頻處理裝置的第一實施例的方塊示意圖。圖2為當(dāng)移動信息指示左眼圖像與右眼圖像為靜態(tài)圖像時，在一種偏振轉(zhuǎn)換模式下所產(chǎn)生的處理后的視頻幀的示意圖。圖3為當(dāng)移動信息指示左眼圖像與右眼圖像不是靜態(tài)圖像時，在另一種偏振轉(zhuǎn)換模式下所產(chǎn)生的處理后的視頻幀的示意圖。圖4為當(dāng)移動信息指示左眼圖像與右眼圖像不是靜態(tài)圖像時，在又一種偏振轉(zhuǎn)換模式下所產(chǎn)生的處理后的視頻幀的示意圖。圖5為根據(jù)各自的權(quán)重系數(shù)來混合多個候選內(nèi)容的偏振轉(zhuǎn)換操作范例的示意圖。圖6為本發(fā)明視頻處理裝置的第二實施例的方塊示意圖。圖7為本發(fā)明視頻處理裝置的第三實施例的方塊示意圖。圖8為本發(fā)明視頻處理裝置的第四實施例的方塊示意圖。圖9為根據(jù)多視角視頻流來產(chǎn)生偏振視頻流的視頻處理方法的流程圖。
具體實施例方式在權(quán)利要求書及說明書中使用了某些詞匯來指稱特定的元件。所屬領(lǐng)域中具有通常知識者應(yīng)可理解，硬件制造商可能會用不同的名詞來稱呼同樣的元件。本權(quán)利要求書及說明書并不以名稱的差異來作為區(qū)分元件的方式，而是以元件在功能上的差異來作為區(qū)分的準則。在權(quán)利要求書及說明書中所提及的「包括」為開放式的用語，故應(yīng)解釋成「包括但不限定于」。另外，「耦接」一詞在此包括任何直接及間接的電氣連接手段。因此，若文中描述第一裝置耦接于第二裝置，則代表所述第一裝置可直接電氣連接于所述第二裝置，或通過其他裝置或連接手段間接地電氣連接至所述第二裝置。如圖I所示，圖I為本發(fā)明視頻處理裝置的第一實施例的方塊示意圖。視頻處理裝置100用以根據(jù)多視角視頻流(例如，立體/三維視頻流)SI來產(chǎn)生偏振視頻流S2。偏振視頻流S2可提供給用來播放垂直次要取樣巾貞(vertically sub-sampled frame)的偏光型面板(polarizer type panel)、用來播放水平次要取樣巾貞(horizontally sub-sampledframe)的屏障型面板(barrier type panel)或者用來播放垂直與水平次要取樣巾貞的屏障/柱狀型面板(barrier/lenticular type panel)。在本實施例中,視頻處理裝置100包括(但不局限于)移動信息檢測器102以及偏振轉(zhuǎn)換器104。移動信息檢測器102與偏振轉(zhuǎn)換器104均可存取(access)儲存/緩沖裝置，例如動態(tài)隨機存取存儲器(dynamic randomaccesses memory, DRAM) 101，用來暫時儲存待處理的數(shù)據(jù)以及處理后的數(shù)據(jù)。移動信息檢測器102通過處理多視角視頻流SI來檢測多視角視頻流SI的移動信息INF。偏振轉(zhuǎn)換器104耦接于移動信息檢測器102，且根據(jù)移動信息INF來將多視角視頻流SI轉(zhuǎn)換為偏振視頻流S2。由于移動信息INF會針對包括在多視角視頻流SI中的每一個原本的視頻幀的部分影像內(nèi)容或者全部影像內(nèi)容來提供移動狀態(tài)(motion status)，因此偏振轉(zhuǎn)換器104可以參考移動信息INF來啟動適當(dāng)?shù)钠褶D(zhuǎn)換模式以設(shè)定包括于偏振視頻流S2中的處理后的視頻幀。由于可以有一種以上的偏振轉(zhuǎn)換模式被采用，因此沒有移動和/或在不同方向 上具有移動的不同的視頻幀的播放品質(zhì)便會有所提升。更明確地來說，現(xiàn)有技術(shù)所面臨到的上述的畫面閃爍問題可得以避免或減輕，進而使得偏振立體影像/三維影像的播放品質(zhì)獲得改善。進一步的說明將詳述如下。為了方便解說，在下列實施例中的偏振視頻流S2提供給用來播放垂直次要取樣幀的偏光型面板，因此，由偏振轉(zhuǎn)換操作所產(chǎn)生的處理后的視頻幀是基于多視角視頻流Si所傳送的原本的視頻幀中所提取出來的奇數(shù)線與偶數(shù)線的結(jié)合(例如，多個像素行(pixelrow)的結(jié)合)。然而，此僅作為說明用，并非作為本發(fā)明的限制條件，舉例來說，當(dāng)偏振轉(zhuǎn)換器104被用來產(chǎn)生偏振視頻流S2至屏障型面板或屏障/光柵型面板時，由偏振轉(zhuǎn)換操作所產(chǎn)生的處理后的視頻幀是基于多視角視頻流SI所傳送的原本的視頻幀中所提取出來的奇數(shù)線與偶數(shù)線的結(jié)合(例如，多個像素列(Pixel column)的結(jié)合，或者多個像素行與多個像素列的結(jié)合)。簡言之，只要是從多視角視頻流SI所取得的移動信息有被參考來控制用以產(chǎn)生偏振視頻流S2的偏振轉(zhuǎn)換操作，均符合本發(fā)明的精神。在第一設(shè)計范例中，移動信息檢測器102通過檢測原本的視頻幀是否為靜態(tài)圖像/圖片，來產(chǎn)生多視角視頻流SI的原本的視頻幀的移動信息INF，也就是說，移動信息檢測器102只會檢查原本的視頻幀中是否包括移動物體(moving object)，并不會確切辨識移動物體的移動方向。對于偏振轉(zhuǎn)換器104而言，其可通過使用分別響應(yīng)移動信息INF所指示的不同移動狀態(tài)所設(shè)定的不同偏振轉(zhuǎn)換模式，來將多視角視頻流SI轉(zhuǎn)換為偏振視頻流S2。更明確地來說，當(dāng)移動信息INF指示原本的視頻幀(例如，一對左眼圖像與右眼圖像)為靜態(tài)圖像時，偏振轉(zhuǎn)換器104便在第一偏振轉(zhuǎn)換模式下將多視角視頻流SI的原本的視頻幀轉(zhuǎn)換為偏振視頻流S2的處理后的視頻幀；以及當(dāng)移動信息INF指示原本的視頻幀(例如，一對左眼圖像與右眼圖像)不是靜態(tài)圖像，其表示原本的視頻幀中包括移動物體時，偏振轉(zhuǎn)換器104便在第二偏振轉(zhuǎn)換模式下將多視角視頻流SI的原本的視頻幀轉(zhuǎn)換為偏振視頻流S2的處理后的視頻幀。要注意的是，當(dāng)操作于不同偏振轉(zhuǎn)換模式下時，偏振轉(zhuǎn)換器104會進行不同的偏振轉(zhuǎn)換。由偏振轉(zhuǎn)換器104所進行的不同的偏振轉(zhuǎn)換的范例說明如下。圖2為當(dāng)移動信息INF指示左眼圖像MG_L與右眼圖像頂G_R為靜態(tài)圖像時，在一種偏振轉(zhuǎn)換模式下所產(chǎn)生的處理后的視頻幀頂G的示意圖。當(dāng)移動信息INF指示原本的視頻幀(例如，具有掃描線L1、L2、· · ·、L1079以及L1080包括于其中的左眼圖像IMG_L,以及具有掃描線R1、R2、...、R1079以及R1080包括于其中的右眼圖像MG_R)為靜態(tài)圖像時，偏振轉(zhuǎn)換器104會采用圖2中的偏振轉(zhuǎn)換操作以產(chǎn)生偏振視頻流S2的處理后的視頻幀。舉例來說，傳統(tǒng)的偏振轉(zhuǎn)換方法提取左眼圖像IMG_L中一半的掃描線(例如，奇掃描線)，提取右眼圖像MG_R中一半的掃描線(例如，偶掃描線)，并且通過結(jié)合所提取的掃描線來產(chǎn)生處理后的視頻幀MG。要注意的是，由偏振轉(zhuǎn)換器104在所述偏振轉(zhuǎn)換模式下所產(chǎn)生的處理后的視頻幀的幀速率相同于通過多視角視頻流SI來傳送的左眼圖像與右眼圖像的幀速率。當(dāng)沒有使用更快的巾貞速率來提升偏振立體顯示(polarized stereo display)的解析度時，前述的畫面閃爍的問題便可得以避免。換句話說，不具有移動的處理后的視頻幀在偏光型面板上播放時會有好的播放品質(zhì)。要注意的是，包括在左眼圖像MG_L/右眼圖像MG_R中的掃描線的條數(shù)僅作為范例說明用，并非作為本發(fā)明的限制條件。 圖3為當(dāng)移動信息INF指示左眼圖像MG_L與右眼圖像MG_R不是靜態(tài)圖像時，在另一種偏振轉(zhuǎn)換模式下所產(chǎn)生的處理后的視頻幀MG_1與IMG_2的示意圖。圖4為當(dāng)移動信息INF指示左眼圖像MG_L與右眼圖像MG_R不是靜態(tài)圖像時，在又一種偏振轉(zhuǎn)換模式下所產(chǎn)生的處理后的視頻幀MG_1’與MG_2’的示意圖。當(dāng)移動信息INF指示原本的視頻幀(例如，左眼圖像MG_L與右眼圖像MG_R)不是靜態(tài)圖像時，偏振轉(zhuǎn)換器104會采用圖3或圖4所示的偏振轉(zhuǎn)換操作來產(chǎn)生偏振視頻流S2的處理后的視頻幀IMG_1與IMG_2或MG_1’與MG_2’。如圖3與圖4所示，相較于包括在多視角視頻流SI中的左眼圖像與右眼圖像的幀速率，由偏振轉(zhuǎn)換器104所產(chǎn)生的處理后的視頻幀在時域上會具有較快的幀速率。對于圖3中的偏振轉(zhuǎn)換操作而言，先通過匯集(gather) —對左眼圖像MG_L與右眼圖像MG_R的偶掃描線來產(chǎn)生處理后的視頻幀MG_1，然后通過匯集同一對左眼圖像MG_L與右眼圖像MG_R的奇掃描線來產(chǎn)生另一處理后的視頻幀MG_2。對于圖4中的偏振轉(zhuǎn)換操作而言，先通過匯集一對左眼圖像頂G_L與右眼圖像MG_R的奇掃描線來產(chǎn)生處理后的視頻幀MG_1’，然后通過匯集同一對左眼圖像MG_L與右眼圖像MG_R的偶掃描線來產(chǎn)生另一處理后的視頻幀MG_2’。由于處理后的視頻幀不是靜態(tài)圖像，所以會具有包括于其中的移動物體，而使用較高的幀速率來播放處理后的視頻幀結(jié)果將會提高解析度，且相較于使用較低的幀速率來播放處理后的視頻幀，會具有更好的播放品質(zhì)。更明確地來說，基于實驗結(jié)果的觀察，采用圖2中的偏振轉(zhuǎn)換操作的偏振轉(zhuǎn)換器104會操作于使本身為靜態(tài)圖像的視頻幀具有最佳播放品質(zhì)的一種偏振轉(zhuǎn)換模式之下；采用圖3中的偏振轉(zhuǎn)換操作的偏振轉(zhuǎn)換器104會操作于使具有朝下移動的視頻幀具有最佳播放品質(zhì)的另一種偏振轉(zhuǎn)換模式之下；以及采用圖4中的偏振轉(zhuǎn)換操作的偏振轉(zhuǎn)換器104會操作于使具有朝上移動的視頻幀具有最佳播放品質(zhì)的又一種偏振轉(zhuǎn)換模式之下。根據(jù)此觀察便發(fā)展出第二設(shè)計范例，在第二設(shè)計范例中，移動信息檢測器102通過檢測原本的視頻幀的全域移動(global motion)來產(chǎn)生多視角視頻流SI的原本的視頻幀的移動信息INF，也就是說，當(dāng)多視角視頻流SI的原本的視頻幀不是靜態(tài)圖像時，移動信息檢測器102可辨識出原本的視頻幀中所有移動物體所對應(yīng)的全域移動的方向。舉例來說，當(dāng)多視角視頻流SI的原本的視頻幀不是靜態(tài)圖像時，移動信息檢測器102會檢測在垂直方向上所累積的移動(即，垂直方向上的全域移動)以決定出原本的視頻幀具有向上或向下方向的全域移動。當(dāng)移動信息INF指示原本的視頻幀(例如，左眼圖像MG_L與右眼圖像MG_R)為靜態(tài)圖像時，偏振轉(zhuǎn)換器104會操作在第一偏振轉(zhuǎn)換模式之下(例如，采用圖2中的偏振轉(zhuǎn)換操作)，來將原本的視頻幀轉(zhuǎn)換為偏振視頻流S2的處理后的視頻幀。當(dāng)移動信息INF指示原本的視頻幀(例如，左眼圖像頂G_L與右眼圖像MG_R)具有在第一方向上(例如，向下方向)的全域移動時，偏振轉(zhuǎn)換器104會操作在第二偏振轉(zhuǎn)換模式之下(例如，采用圖3中的偏振轉(zhuǎn)換操作)，來將原本的視頻幀轉(zhuǎn)換為處理后的視頻幀。當(dāng)移動信息INF指示原本的視頻幀(例如，左眼圖像頂G_L與右眼圖像頂G_R)具有在第二方向上(例如，向上方向)的全域移動時，偏振轉(zhuǎn)換器104會操作在第三偏振轉(zhuǎn)換模式之下(例如，采用圖4中的偏振轉(zhuǎn)換操作)，來將原本的視頻幀轉(zhuǎn)換為處理后的視頻幀。在上述條件均未滿足的情況中，偏振轉(zhuǎn)換器104可被設(shè)定來持續(xù)使用之前所采用的偏振轉(zhuǎn)換操作，也就是說，偏振轉(zhuǎn)換器104目前操作中的偏振轉(zhuǎn)換模式會維持不變。對于處理后的視頻幀為靜態(tài)圖像而言，由于沒有采用更快的幀速率來提高解析度，因此，前述的畫面閃爍的問題可輕易地得以避免。簡單來說，對于偏振立體顯示而言， 不具有移動的視頻幀將會有最佳化的播放品質(zhì)。對于具有在向上方向或向下方向上的全域移動的視頻幀而言，偏振轉(zhuǎn)換模式適應(yīng)性地根據(jù)全域移動的方向來選擇，因此，圖3中的偏振轉(zhuǎn)換操作由于先選擇偶掃描線然后才選擇奇掃描線，其能夠避免/減緩具有向下移動的視頻幀的畫面閃爍，播放品質(zhì)則可相對應(yīng)地有所提升；相似地，圖4中的偏振轉(zhuǎn)換操作由于先選擇奇掃描線然后才選擇偶掃描線，其能夠避免/減緩具有向上移動的視頻幀的畫面閃爍，播放品質(zhì)則可相對應(yīng)地有所提升。在上述的設(shè)計范例中，偏振轉(zhuǎn)換操作在幀級(frame level)中進行，然而，這并不作為本發(fā)明的限制條件，舉例來說，在第三設(shè)計范例中，偏振轉(zhuǎn)換操作被允許在塊/像素級(block/pixel level)中進行。實作上，基于所采用的移動信息檢測機制，偏振轉(zhuǎn)換操作可以在幀級或塊/像素級中進行。在第三設(shè)計范例中，移動信息檢測器102通過檢測原本的視頻幀的移動向量(motion vector),來產(chǎn)生多視角視頻流SI的原本的視頻巾貞的移動信息INF,也就是說,移動信息檢測器102可決定多視角視頻流SI的原本的視頻幀中一部分的移動，其中原本的視頻幀的一部分可以是一個像素或是一個包括多個像素的塊。對于偏振轉(zhuǎn)換器104而言，其根據(jù)從多視角視頻流SI的原本的視頻幀中的一部分的處理所取得的移動信息來決定多個權(quán)重系數(shù)(weighting factor),以在多個不同偏振轉(zhuǎn)換模式下產(chǎn)生偏振視頻流S2的處理后的視頻幀中的一部分的多個候選(candidate)內(nèi)容，且根據(jù)所述多個權(quán)重系數(shù)來混合(blend)所述多個候選內(nèi)容，以輸出處理后的視頻幀中的一部分的實際內(nèi)容?；趬K/像素的偏振轉(zhuǎn)換操作說明如下。如圖5所示，圖5為根據(jù)各自的權(quán)重系數(shù)來混合多個候選內(nèi)容的偏振轉(zhuǎn)換操作范例的不意圖。在本實施例中，偏振轉(zhuǎn)換模式包括第一偏振轉(zhuǎn)換模式Ml、第二偏振轉(zhuǎn)換模式M2以及第三偏振轉(zhuǎn)換模式M3。移動信息INF指示原本的視頻幀(例如，左眼圖像MG_L)中的掃描線LI與L2的移動狀態(tài)。當(dāng)移動信息ING指示掃描線LI與L2對應(yīng)于靜態(tài)圖像時，對應(yīng)至第一偏振轉(zhuǎn)換模式Ml的權(quán)重系數(shù)Wl被設(shè)定為大于第二偏振轉(zhuǎn)換模式M2與第三偏振轉(zhuǎn)換模式M3所分別對應(yīng)的權(quán)重系數(shù)W2與W3。當(dāng)移動信息INF指示掃描線LI與L2在第一方向上(例如，向上方向)具有大于在第二方向上(例如，向下方向)的移動時，權(quán)重系數(shù)W2被設(shè)定為大于權(quán)重系數(shù)Wl與W3。當(dāng)移動信息INF指示掃描線LI與L2在所述第二方向上(例如，所述向下方向)具有大于在所述第一方向上(例如，所述向上方向)的移動時，權(quán)重系數(shù)W3被設(shè)定為大于權(quán)重系數(shù)Wl與W2。此外，當(dāng)操作在第一偏振轉(zhuǎn)換模式Ml下時，偏振轉(zhuǎn)換器104通過輸出從位于包括奇掃描線(例如，LI)與偶掃描線(例如，L2)的相鄰兩掃描線上的像素所取得的像素值的平均值，來產(chǎn)生候選內(nèi)容；當(dāng)操作在第二偏振轉(zhuǎn)換模式M2下時，偏振轉(zhuǎn)換器104在輸出位于偶掃描線(例如，L2)上像素的像素值之前，輸出位于奇掃描線(例如，LI)上像素的像素值來產(chǎn)生另一候選內(nèi)容；以及當(dāng)操作在第三偏振轉(zhuǎn)換模式M3下時，偏振轉(zhuǎn)換器104在輸出位于奇掃描線(例如，LI)上像素的像素值之前，輸出位于偶掃描線(例如，L2)上像素的像素值來產(chǎn)生又一候選內(nèi)容。由于權(quán)重系數(shù)Wl W3是根據(jù)欲處理的掃描線LI與L2的實際移動狀態(tài)來設(shè)定， 以較快的幀速率來播放處理后的視頻幀MG_11與IMG_12會由于提升的解析度與減緩的畫面閃爍效應(yīng)而具有增強的顯示品質(zhì)。如圖I所示，移動信息檢測器102可以是專用于(dedicated to)偏振轉(zhuǎn)換器104的硬件元件，然而，此僅作為范例說明用，并非作為本發(fā)明的限制條件，舉例來說，可采用硬件共用(hardware sharing)技術(shù)來降低硬件的成本。一些設(shè)計變化顯示于圖6 圖8中。圖6為本發(fā)明視頻處理裝置的第二實施例的方塊示意圖。由本圖可見，移動信息檢測器 102 整合在移動估計移動補償(motion estimation motion compensation, MEMC)中貞速率轉(zhuǎn)換器(frame rate converter) 602中，也就是說,視頻處理裝置600中的移動信息檢測器102為移動估計移動補償幀速率轉(zhuǎn)換器602的一部分，并且與偏振轉(zhuǎn)換器104共用，以提供所需的移動信息INF至偏振轉(zhuǎn)換器104。圖7為本發(fā)明視頻處理裝置的第三實施例的方塊示意圖。由本圖可見，移動信息檢測器102整合在去交錯器(deinterlacer) 702中，也就是說，視頻處理裝置700中的移動信息檢測器102為去交錯器702的一部分，并且與偏振轉(zhuǎn)換器104共用，以提供所需的移動信息INF至偏振轉(zhuǎn)換器104。圖8為本發(fā)明視頻處理裝置的第四實施例的方塊示意圖。由本圖可見，移動信息檢測器102整合在時域降噪電路(temporal noise reduction circuit) 802中，也就是說，視頻處理裝置800中的移動信息檢測器102為時域降噪電路802的一部分，并且與偏振轉(zhuǎn)換器104共用，以提供所需的移動信息INF至偏振轉(zhuǎn)換器104。圖9為根據(jù)多視角視頻流來產(chǎn)生偏振視頻流的視頻處理方法的流程圖。所述視頻處理方法可被上述視頻處理裝置100，600，700，與800中的其一所采用，且可簡單總結(jié)如下。步驟900:開始。步驟902 :通過處理多視角視頻流來檢測所述多視角視頻流的移動信息。步驟904 :根據(jù)所檢測到的移動信息來將所述多視角視頻流轉(zhuǎn)換為偏振視頻流?；谒捎玫囊苿有畔z測機制，偏振轉(zhuǎn)換操作可以在幀級或塊/像素級中進行。步驟906:結(jié)束。步驟902可以被硬件元件(例如移動信息檢測器102)來執(zhí)行，且步驟904可以被另一硬件元件(例如偏振轉(zhuǎn)換器104)來執(zhí)行。本領(lǐng)域的技術(shù)人員可于閱讀以上闡述視頻處理裝置的段落后，輕易了解每一步驟的細節(jié)，詳細說明及變化可參考前述，為簡潔起見，故在此不再贅述。以上所述僅為本發(fā)明的較佳實施方式，凡依本發(fā)明權(quán)利要求所做的均等變化和修飾，均應(yīng)屬本發(fā)明 的涵蓋范圍。
權(quán)利要求
1.一種視頻處理裝置，用以根據(jù)多視角視頻流來產(chǎn)生偏振視頻流，其特征在于，包括 移動信息檢測器，用來通過處理所述多視角視頻流，來檢測所述多視角視頻流的移動/[目息;以及 偏振轉(zhuǎn)換器，耦接于所述移動信息檢測器，且根據(jù)所述移動信息來將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流。
2.如權(quán)利要求I所述的視頻處理裝置，其特征在于，所述移動信息檢測器通過檢測所述多視角視頻流的原本的視頻幀是否為靜態(tài)圖像、檢測所述原本的視頻幀的全域移動或者檢測所述原本的視頻幀的移動向量，來產(chǎn)生所述多視角視頻流的所述原本的視頻幀的移動信息。
3.如權(quán)利要求I所述的視頻處理裝置，其特征在于，所述移動信息檢測器整合于移動估計移動補償幀速率轉(zhuǎn)換器、去交錯器或時域降噪電路之中。
4.如權(quán)利要求I所述的視頻處理裝置，其特征在于，所述偏振轉(zhuǎn)換器通過使用響應(yīng)所述移動信息所指示的不同移動狀態(tài)所分別設(shè)定的不同偏振轉(zhuǎn)換模式，來將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流。
5.如權(quán)利要求4所述的視頻處理裝置，其特征在于，當(dāng)所述多視角視頻流的原本的視頻幀的移動信息指示所述原本的視頻幀為靜態(tài)圖像時，所述偏振轉(zhuǎn)換器操作在第一偏振轉(zhuǎn)換模式下，來將所述原本的視頻幀轉(zhuǎn)換為所述偏振視頻流的處理后的視頻幀；以及當(dāng)所述原本的視頻幀的所述移動信息指示所述原本的視頻幀不是靜態(tài)圖像時，所述偏振轉(zhuǎn)換器操作在第二偏振轉(zhuǎn)換模式下，來將所述原本的視頻幀轉(zhuǎn)換為所述處理后的視頻幀。
6.如權(quán)利要求5所述的視頻處理裝置，其特征在于，在所述第二偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的幀速率高于在所述第一偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的幀速率。
7.如權(quán)利要求4所述的視頻處理裝置，其特征在于，當(dāng)所述多視角視頻流的原本的視頻幀的移動信息指示所述原本的視頻幀為靜態(tài)圖像時，所述偏振轉(zhuǎn)換器操作在第一偏振轉(zhuǎn)換模式下，來將所述原本的視頻幀轉(zhuǎn)換為所述偏振視頻流的處理后的視頻幀；當(dāng)所述原本的視頻幀的所述移動信息指示所述原本的視頻幀具有在第一方向上的全域移動時，所述偏振轉(zhuǎn)換器操作在第二偏振轉(zhuǎn)換模式下，來將所述原本的視頻幀轉(zhuǎn)換為所述處理后的視頻幀；以及當(dāng)所述原本的視頻幀的所述移動信息指示所述原本的視頻幀具有在第二方向上的全域移動時，所述偏振轉(zhuǎn)換器操作在第三偏振轉(zhuǎn)換模式下，來將所述原本的視頻幀轉(zhuǎn)換為所述處理后的視頻幀。
8.如權(quán)利要求7所述的視頻處理裝置，其特征在于，在所述第二偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的第二幀速率高于在所述第一偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的第一幀速率；以及在所述第三偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的第三幀速率高于在所述第一偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的所述第一幀速率。
9.如權(quán)利要求8所述的視頻處理裝置，其特征在于，所述第三幀速率等于所述第二幀速率；所述原本的視頻幀包括對應(yīng)第一視角的第一視頻幀以及對應(yīng)第二視角的第二視頻幀；當(dāng)操作在所述第二偏振轉(zhuǎn)換模式下時，所述偏振轉(zhuǎn)換器先通過匯集所述第一視頻幀與所述第二視頻幀的奇數(shù)線來產(chǎn)生第一處理后的視頻幀，然后通過匯集所述第一視頻幀與所述第二視頻幀的偶數(shù)線來產(chǎn)生第二處理后的視頻幀；以及當(dāng)操作在所述第三偏振轉(zhuǎn)換模式下時，所述偏振轉(zhuǎn)換器先通過匯集所述第一視頻幀與所述第二視頻幀的偶數(shù)線來產(chǎn)生所述第一處理后的視頻幀，然后通過匯集所述第一視頻幀與所述第二視頻幀的奇數(shù)線來產(chǎn)生所述第二處理后的視頻幀。
10.如權(quán)利要求I所述的視頻處理裝置，其特征在于，所述偏振轉(zhuǎn)換器根據(jù)所述多視角視頻流的原本的視頻幀中一部分的移動信息來決定多個權(quán)重系數(shù)，在多個不同偏振轉(zhuǎn)換模式下分別產(chǎn)生所述偏振視頻流的處理后的視頻幀中一部分的多個候選內(nèi)容，且根據(jù)所述多個權(quán)重系數(shù)來混合所述多個候選內(nèi)容以輸出所述處理后的視頻幀中所述部分的實際內(nèi)容。
11.如權(quán)利要求10所述的視頻處理裝置，其特征在于，所述多個不同偏振轉(zhuǎn)換模式包括第一偏振轉(zhuǎn)換模式、第二偏振轉(zhuǎn)換模式以及第三偏振轉(zhuǎn)換模式；當(dāng)所述原本的視頻幀中所述部分的所述移動信息指示所述原本的視頻幀中所述部分為靜態(tài)圖像時，對應(yīng)于所述第一偏振轉(zhuǎn)換模式的權(quán)重系數(shù)被設(shè)定為大于所述第二偏振轉(zhuǎn)換模式、第三偏振轉(zhuǎn)換模式所分別對應(yīng)的權(quán)重系數(shù)；當(dāng)所述原本的視頻幀中所述部分的所述移動信息指示所述原本的視頻 中貞中所述部分在第一方向上的移動大于在第二方向上的移動時，對應(yīng)于所述第二偏振轉(zhuǎn)換模式的權(quán)重系數(shù)被設(shè)定為大于所述第一偏振轉(zhuǎn)換模式、第三偏振轉(zhuǎn)換模式所分別對應(yīng)的權(quán)重系數(shù)；當(dāng)所述原本的視頻幀中所述部分的所述移動信息指示所述原本的視頻幀中所述部分在所述第二方向上的移動大于在所述第一方向上的移動時，對應(yīng)于所述第三偏振轉(zhuǎn)換模式的權(quán)重系數(shù)被設(shè)定為大于所述第一偏振轉(zhuǎn)換模式、第二偏振轉(zhuǎn)換模式所分別對應(yīng)的權(quán)重系數(shù)。
12.如權(quán)利要求11所述的視頻處理裝置，其特征在于，當(dāng)操作在所述第一偏振轉(zhuǎn)換模式下時，所述偏振轉(zhuǎn)換器通過輸出從位于包括奇數(shù)線與偶數(shù)線的相鄰兩條線上的像素所取得的像素值的平均值來產(chǎn)生候選內(nèi)容；當(dāng)操作在所述第二偏振轉(zhuǎn)換模式下時，所述偏振轉(zhuǎn)換器在輸出位于所述偶數(shù)線上像素的像素值之前，輸出位于所述奇數(shù)線上像素的像素值來產(chǎn)生另一候選內(nèi)容；以及當(dāng)操作在所述第三偏振轉(zhuǎn)換模式下時，所述偏振轉(zhuǎn)換器在輸出位于所述奇數(shù)線上像素的像素值之前，輸出位于所述偶數(shù)線上像素的像素值來產(chǎn)生又一候選內(nèi)容。
13.—種視頻處理方法，用以根據(jù)多視角視頻流來產(chǎn)生偏振視頻流，其特征在于，包括 通過處理所述多視角視頻流，來檢測所述多視角視頻流的移動信息；以及 根據(jù)所述移動信息來將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流。
14.如權(quán)利要求13所述的視頻處理方法，其特征在于，檢測所述多視角視頻流的所述移動信息的步驟包括 通過檢測所述多視角視頻流的原本的視頻幀是否為靜態(tài)圖像、檢測所述原本的視頻幀的全域移動或者檢測所述原本的視頻幀的移動向量，來產(chǎn)生所述多視角視頻流的所述原本的視頻幀的移動信息。
15.如權(quán)利要求13所述的視頻處理方法，其特征在于，檢測所述多視角視頻流的所述移動信息的步驟包括 進行移動估計移動補償幀速率轉(zhuǎn)換、去交錯操作或者時域噪音消除，來檢測所述多視角視頻流的所述移動信息。
16.如權(quán)利要求13所述的視頻處理方法，其特征在于，將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流的步驟包括 通過使用響應(yīng)所述移動信息所指示的不同移動狀態(tài)所分別設(shè)定的不同偏振轉(zhuǎn)換模式，來將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流。
17.如權(quán)利要求16所述的視頻處理方法，其特征在于，通過使用不同偏振轉(zhuǎn)換模式來將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流的步驟包括 當(dāng)所述多視角視頻流的原本的視頻幀的移動信息指示所述原本的視頻幀為靜態(tài)圖像時，在第一偏振轉(zhuǎn)換模式下將所述原本的視頻幀轉(zhuǎn)換為所述偏振視頻流的處理后的視頻幀；以及 當(dāng)所述原本的視頻幀的所述移動信息指示所述原本的視頻幀不是靜態(tài)圖像時，在第二偏振轉(zhuǎn)換模式下將所述原本的視頻幀轉(zhuǎn)換為所述處理后的視頻幀。
18.如權(quán)利要求17所述的視頻處理方法，其特征在于，在所述第二偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的幀速率高于在所述第一偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的幀速率。
19.如權(quán)利要求16所述的視頻處理方法，其特征在于，通過使用不同偏振轉(zhuǎn)換模式將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流的步驟包括 當(dāng)所述多視角視頻流的原本的視頻幀的移動信息指示所述原本的視頻幀為靜態(tài)圖像時，在第一偏振轉(zhuǎn)換模式下將所述原本的視頻幀轉(zhuǎn)換為所述偏振視頻流的處理后的視頻幀； 當(dāng)所述原本的視頻幀的所述移動信息指示所述原本的視頻幀具有在第一方向上的全域移動時，在第二偏振轉(zhuǎn)換模式下將所述原本的視頻幀轉(zhuǎn)換為所述處理后的視頻幀；以及 當(dāng)所述原本的視頻幀之所述移動信息指示所述原本的視頻幀具有在第二方向上的全域移動時，在第三偏振轉(zhuǎn)換模式下將所述原本的視頻幀轉(zhuǎn)換為所述處理后的視頻幀。
20.如權(quán)利要求19所述的視頻處理方法，其特征在于，在所述第二偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的第二幀速率高于在所述第一偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的第一幀速率；以及在所述第三偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的第三幀速率高于在所述第一偏振轉(zhuǎn)換模式下所產(chǎn)生的所述處理后的視頻幀的所述第一幀速率。
21.如權(quán)利要求20所述的視頻處理方法，其特征在于，所述第三幀速率等于所述第二幀速率；所述原本的視頻幀包括對應(yīng)第一視角的第一視頻幀以及對應(yīng)第二視角的第二視頻幀；在所述第二偏振轉(zhuǎn)換模式下，第一處理后的視頻幀先通過匯集所述第一視頻幀與所述第二視頻幀的奇數(shù)線來產(chǎn)生，然后第二處理后的視頻幀再通過匯集所述第一視頻幀與所述第二視頻幀的偶數(shù)線來產(chǎn)生；以及在所述第三偏振轉(zhuǎn)換模式下，所述第一處理后的視頻幀先通過匯集所述第一視頻幀與所述第二視頻幀的偶數(shù)線來產(chǎn)生，然后所述第二處理后的視頻幀再通過匯集所述第一視頻幀與所述第二視頻幀的奇數(shù)線來產(chǎn)生。
22.如權(quán)利要求13所述的視頻處理方法，其特征在于，將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流的步驟包括 根據(jù)所述多視角視頻流的原本的視頻幀中一部分的移動信息來決定多個權(quán)重系數(shù)； 在多個不同偏振轉(zhuǎn)換模式下分別產(chǎn)生所述偏振視頻流的處理后的視頻幀中一部分的多個候選內(nèi)容；以及 根據(jù)所述多個權(quán)重系數(shù)來混合所述多個候選內(nèi)容，以輸出所述處理后的視頻幀中所述部分的實際內(nèi)容。
23.如權(quán)利要求22所述的視頻處理方法，其特征在于，所述多個不同偏振轉(zhuǎn)換模式包括第一偏振轉(zhuǎn)換模式、第二偏振轉(zhuǎn)換模式以及第三偏振轉(zhuǎn)換模式；當(dāng)所述原本的視頻幀中所述部分的所述移動信息指示所述原本的視頻幀中所述部分為靜態(tài)圖像時，對應(yīng)于所述第一偏振轉(zhuǎn)換模式的權(quán)重系數(shù)被設(shè)定為大于所述第二偏振轉(zhuǎn)換模式、第三偏振轉(zhuǎn)換模式所分別對應(yīng)的權(quán)重系數(shù)；當(dāng)所述原本的視頻幀中所述部分的所述移動信息指示所述原本的視頻中貞中所述部分在第一方向上的移動大于在第二方向上的移動時，對應(yīng)于所述第二偏振轉(zhuǎn)換模式的權(quán)重系數(shù)被設(shè)定為大于所述第一偏振轉(zhuǎn)換模式、第三偏振轉(zhuǎn)換模式所分別對應(yīng)的權(quán) 重系數(shù)；當(dāng)所述原本的視頻幀中所述部分的所述移動信息指示所述原本的視頻幀中所述部分在所述第二方向上的移動大于在所述第一方向上的移動時，對應(yīng)于所述第三偏振轉(zhuǎn)換模式的權(quán)重系數(shù)被設(shè)定為大于所述第一偏振轉(zhuǎn)換模式、第二偏振轉(zhuǎn)換模式所分別對應(yīng)的權(quán)重系數(shù)。
24.如權(quán)利要求23所述的視頻處理方法，其特征在于，產(chǎn)生所述多個候選內(nèi)容的步驟包括 在所述第一偏振轉(zhuǎn)換模式下，通過輸出從位于包括奇數(shù)線與偶數(shù)線的相鄰兩條線上的像素所取得的像素值的平均值來產(chǎn)生候選內(nèi)容； 在所述第二偏振轉(zhuǎn)換模式下，在輸出位于所述偶數(shù)線上像素的像素值之前，通過輸出位于所述奇數(shù)線上像素的像素值來產(chǎn)生另一候選內(nèi)容；以及 在所述第三偏振轉(zhuǎn)換模式下，在輸出位于所述奇數(shù)線上像素的像素值之前，通過輸出位于所述偶數(shù)線上像素的像素值來產(chǎn)生又一候選內(nèi)容。
全文摘要
本發(fā)明公開一種視頻處理裝置和視頻處理方法。所述視頻處理裝置用以根據(jù)多視角視頻流來產(chǎn)生偏振視頻流，包括移動信息檢測器以及偏振轉(zhuǎn)換器。所述移動信息檢測器通過處理所述多視角視頻流來檢測所述多視角視頻流的移動信息。所述偏振轉(zhuǎn)換器耦接于所述移動信息檢測器，且根據(jù)所述移動信息來將所述多視角視頻流轉(zhuǎn)換為所述偏振視頻流。本發(fā)明所公開的視頻處理裝置和視頻處理方法，基于多視角視頻流的移動信息來將多視角視頻流轉(zhuǎn)換為偏振視頻流，能夠改善立體影像或三維影像的播放品質(zhì)。
文檔編號H04N13/00GK102970552SQ20111042868
公開日2013年3月13日 申請日期2011年12月20日 優(yōu)先權(quán)日2011年9月1日
發(fā)明者張德浩 申請人:聯(lián)發(fā)科技股份有限公司