專利名稱：圖像處理裝置和圖像處理方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像處理裝置和圖像處理方法，更具體而言涉及被配置為適用于切換允許立體觀看的三維運(yùn)動(dòng)圖像的圖像處理裝置、圖像處理方法和程序。
背景技術(shù)：
隨著能夠顯示允許立體觀看的三維運(yùn)動(dòng)圖像(以下稱為3D視頻)電視接收機(jī)的出現(xiàn)，預(yù)期3D視頻圖像將不僅被用于諸如電影之類的特別種類的內(nèi)容，而且也將被用于諸如電視節(jié)目之類的各種其他種類的內(nèi)容。例如，在制作電視節(jié)目的過程中，從視頻A切換到視頻B的編輯任務(wù)被頻繁地執(zhí)行。對(duì)于創(chuàng)建基于3D視頻的內(nèi)容的過程也是如此，并且例如已經(jīng)提出了適用于在三維圖像之間進(jìn)行切換的切換器(編輯指示裝置)(例如，參考以下的日本專利早期公開No.平 8-321992)?，F(xiàn)在，參考圖IA至1C，示出了從視頻A切換到視頻B的三種方法。更具體而言，圖 IA示出了從視頻A瞬時(shí)切換到視頻B的方法(瞬時(shí)切換)。圖IB示出了從視頻A的一端順序切換到視頻B的方法(擦除(wiping))。圖IC示出了通過逐漸降低視頻A的亮度并逐漸提高視頻B的亮度來從視頻A切換到視頻B的方法(混合，淡入或淡出)。

發(fā)明內(nèi)容
在切換3D視頻圖像時(shí)，可以使用圖IA至IC所示的方法中的任何一種。然而，這可能導(dǎo)致在二維視頻圖像的情況中從來沒有出現(xiàn)過的問題。具體而言，在要通過圖IB所示的擦除處理將3D視頻A切換到3D視頻B的情況下，如果3D視頻A的區(qū)域和3D視頻B的區(qū)域共存，則可能出現(xiàn)切換到半途的視頻，就像圖 IB所示的中央視頻那樣。圖2示出了從該畫面的縱軸的延長(zhǎng)上看到切換到半途的視頻的狀態(tài)。應(yīng)當(dāng)注意， 在圖2中，畫面上的帶陰影的五角形之間的距離指示的是3D視頻A的視差，并且畫面上三角形之間的距離指示的是3D視頻B的視差。例如，如圖2所示，把占據(jù)圖2右側(cè)的3D視頻A的視差所獲得深度設(shè)定成從畫面朝著觀看者并且把占據(jù)圖2左側(cè)的3D視頻B的視差所獲得的深度設(shè)定成從觀看者朝著畫面中，則可以增大畫面上存在的對(duì)象的深度之間的差異。如果發(fā)生這種情況，則增大的差異不僅會(huì)使看著該視頻的觀看者有違和感，而且還會(huì)使觀看者的眼睛疲勞，最終導(dǎo)致3D視頻難以觀看。應(yīng)當(dāng)注意，已知圖IA所示的瞬時(shí)切換和圖IC所示的混合切換與圖IB所示的擦除切換相比將提供不難以觀看的視頻。因此，本發(fā)明針對(duì)與現(xiàn)有技術(shù)方法和裝置相關(guān)聯(lián)的上述和其他問題并且通過提供被配置為在不使觀看者對(duì)視頻有違和感且不加重觀看者眼睛的負(fù)擔(dān)的情況下切換3D視頻圖像的圖像處理裝置和圖像處理方法來解決所針對(duì)的問題。在實(shí)現(xiàn)本發(fā)明時(shí)，根據(jù)其一個(gè)實(shí)施例，提供了一種用于編輯3D (三維)視頻的圖像處理裝置。該圖像處理裝置具有切換裝置，用于通過多種切換方法中的任何一種把要被用作編輯結(jié)果的視頻從第一 3D視頻切換到第二 3D視頻；視差測(cè)量裝置，用于測(cè)量3D視頻中的視差以基于測(cè)量到的視差來計(jì)算3D視頻的深度；比較裝置，用于把對(duì)第一 3D視頻計(jì)算的第一深度與對(duì)不同于第一 3D視頻的第二 3D視頻計(jì)算的第二深度之間的差異與預(yù)定閾值相比較；以及限制裝置，用于根據(jù)由比較裝置獲得的比較結(jié)果來限制切換裝置的操作。這兩種或更多種切換方法至少包括擦除，并且如果發(fā)現(xiàn)第一深度與第二深度之間的差異等于或高于預(yù)定閾值，則限制裝置控制切換裝置來限制通過擦除從第一 3D視頻向第二 3D視頻的切換。上述圖像處理裝置還可包括保存裝置，用于將第一 3D視頻和第二 3D視頻保存為靜止圖像，其中切換裝置在第一 3D視頻被切換到第二 3D視頻的時(shí)段期間把保存裝置中保存的靜止圖像用于要被用作編輯結(jié)果的視頻。上述兩種或更多種切換方法至少包括擦除、瞬時(shí)切換和混合。如果發(fā)現(xiàn)第一深度與第二深度之間的差異等于或高于預(yù)定閾值，則限制裝置控制切換裝置以通過不是擦除的切換方法來執(zhí)行從第一 3D視頻到第二 3D視頻的切換。在實(shí)現(xiàn)本發(fā)明時(shí)，根據(jù)其另一實(shí)施例，提供了一種用于編輯3D視頻的圖像處理裝置的圖像處理方法。此方法包括以下步驟通過多種切換方法中的任何一種把要被用作編輯結(jié)果的視頻從第一 3D視頻切換到第二 3D視頻；測(cè)量3D視頻中的視差以基于測(cè)量到的視差來計(jì)算3D視頻的深度；把對(duì)第一 3D視頻計(jì)算的第一深度與對(duì)不同于第一 3D視頻的第二 3D視頻計(jì)算的第二深度之間的差異與預(yù)定閾值相比較；以及根據(jù)在比較步驟中獲得的比較結(jié)果來限制切換步驟的操作。在本發(fā)明的一個(gè)實(shí)施例中，測(cè)量3D視頻的視差?；跍y(cè)量到的視差，計(jì)算3D視頻的深度。然后，把計(jì)算出的第一 3D視頻和第二 3D視頻的深度之間的差異與預(yù)定閾值相比較。根據(jù)所獲得的比較結(jié)果，限制把要用于編輯結(jié)果的視頻從第一 3D視頻切換到第二 3D 視頻的操作。在實(shí)現(xiàn)本發(fā)明時(shí)，根據(jù)其另一實(shí)施例，提供了一種用于編輯3D (三維)視頻的圖像處理裝置。此圖像處理裝置具有切換裝置，用于通過多種切換方法中的任何一種把要被用作編輯結(jié)果的視頻從第一 3D視頻切換到第二 3D視頻；視差測(cè)量裝置，用于測(cè)量第一 3D視頻和第二 3D視頻之間的視差以基于測(cè)量到的視差來計(jì)算深度；獲取裝置，用于獲取淡變器值(fader value)，該淡變器值指示出用于將第一 3D視頻切換到第二 3D視頻的處理操作的序列的進(jìn)展程度；以及視差調(diào)整裝置，用于根據(jù)所獲取的淡變器值來調(diào)整第一 3D視頻和第二 3D視頻的視差；其中，如果擦除被選擇為切換方法，則切換裝置在視差被調(diào)整以使第
一3D視頻的深度與第二 3D視頻的深度相匹配的狀態(tài)中通過擦除將第一 3D視頻切換到第
二3D視頻。上述圖像處理裝置還可包括保存裝置，用于保存視差調(diào)整區(qū)間參數(shù)，該視差調(diào)整區(qū)間參數(shù)指示出構(gòu)成處理操作的序列的第一調(diào)整區(qū)間、切換區(qū)間和第二調(diào)整區(qū)間之間的分隔，其中切換裝置在視差被調(diào)整以使第一 3D視頻的深度與第二 3D視頻的深度相匹配的狀態(tài)中通過擦除將第一 3D視頻切換到第二 3D視頻。上述圖像處理裝置還可具有視差調(diào)整裝置，其中視差調(diào)整裝置響應(yīng)于所獲取的淡變器值的進(jìn)展，在 第一調(diào)整區(qū)間中調(diào)整第一 3D視頻和第二 3D視頻中至少一個(gè)的視差以使得第一 3D視頻的深度和第二 3D視頻的深度相互匹配，并且在第二調(diào)整區(qū)間中調(diào)整第二 3D 視頻的視差以使其返回到其原始值。在上述具有視差調(diào)整裝置的圖像處理裝置中，視差調(diào)整裝置響應(yīng)于所獲取的淡變器值的進(jìn)展，在第一調(diào)整區(qū)間中調(diào)整第一 3D視頻和第二 3D視頻中至少一個(gè)的視差以使得第一 3D視頻和第二 3D視頻的深度的距離中的至少一個(gè)被壓縮以使深度的距離相匹配，并且在第二調(diào)整區(qū)間中調(diào)整第二 3D視頻的視差以使其返回到其原始值。在上述具有切換裝置的圖像處理裝置中，如果混合被選擇為切換方法，則切換裝置在視差被調(diào)整以使第一 3D視頻的深度接近第二 3D視頻的深度的狀態(tài)中將第一 3D視頻切換到第二 3D視頻。上述圖像處理裝置還包括操作輸入裝置，供用戶控制淡變器值。在實(shí)現(xiàn)本發(fā)明時(shí)，根據(jù)其另一實(shí)施例，提供了一種用于編輯3D視頻的圖像處理裝置的圖像處理方法，包括以下步驟測(cè)量第一 3D視頻和第二 3D視頻之間的視差以基于測(cè)量到的視差來計(jì)算3D視頻的深度；獲取淡變器值，該淡變器值指示出用于將第一 3D視頻切換到第二 3D視頻的處理操作的序列的進(jìn)展程度；以及根據(jù)所獲取的淡變器值來調(diào)整第一 3D 視頻和第二 3D視頻的視差；并且如果擦除被選擇為切換方法，則在視差被調(diào)整以使得第一 3D視頻和第二 3D視頻的深度相互匹配的狀態(tài)中通過擦除將第一 3D視頻切換到第二 3D視頻。如上所述，根據(jù)本發(fā)明的一個(gè)實(shí)施例，可以在不使觀看者有違和感并且不加重其眼睛的負(fù)擔(dān)的情況下實(shí)現(xiàn)3D視頻切換。


圖IA至IC是示出視頻切換的三種方法的示圖；圖2是示出基于擦除的3D視頻切換的過程的示意圖；圖3是示出作為本發(fā)明一個(gè)實(shí)施例實(shí)現(xiàn)的3D視頻編輯裝置的示例性配置的框圖；圖4是示出圖3所示的操作輸入塊的示例性配置的外部視圖；圖5是示出圖3所示的切換器的示例性配置的框圖；圖6是示出圖3所示的3D視頻處理塊的示例性配置的框圖；圖7是指示出許可判決處理的流程圖；圖8是與視差調(diào)整區(qū)間參數(shù)的第一示例相對(duì)應(yīng)的示圖；圖9是與視差調(diào)整區(qū)間參數(shù)的第二示例相對(duì)應(yīng)的示圖；圖10是與視差調(diào)整區(qū)間參數(shù)的第三示例相對(duì)應(yīng)的示圖；圖11是與視差調(diào)整區(qū)間參數(shù)的第四示例相對(duì)應(yīng)的示圖；圖12是與視差調(diào)整區(qū)間參數(shù)的第五示例相對(duì)應(yīng)的示圖；圖13是與視差調(diào)整區(qū)間參數(shù)的第六示例相對(duì)應(yīng)的示圖；圖14是與視差調(diào)整區(qū)間參數(shù)的第七示例相對(duì)應(yīng)的示圖；圖15是指示出切換處理的流程圖16是與執(zhí)行深度上的壓縮的情況相對(duì)應(yīng)的示圖；圖17是與不執(zhí)行深度上的壓縮的情況相對(duì)應(yīng)的示圖；圖18是與通過混合執(zhí)行切換的情況相對(duì)應(yīng)的示圖；圖19是示出計(jì)算機(jī)的示例性配置的框圖。
具體實(shí)施例方式將參考附圖經(jīng)由本發(fā)明的最佳模式(以下稱為實(shí)施例)來更詳細(xì)描述本發(fā)明。<1.實(shí)施例 >[3D視頻編輯裝置的示例性配置]參考圖3，其中示出了作為本發(fā)明一個(gè)實(shí)施例實(shí)現(xiàn)的3D視頻編輯裝置的示例性配置。此3D視頻編輯裝置10是由操作輸入塊11、控制塊12、切換器13L和13R以及3D視頻處理塊14構(gòu)成的。操作輸入塊11生成與所進(jìn)行的用戶操作相對(duì)應(yīng)的操作信號(hào)并且將所生成的操作信號(hào)輸出到控制塊12?？刂茐K12基于所提供的操作信號(hào)來輸出控制信號(hào)以控制3D視頻編輯裝置10的每個(gè)組件塊。在基于用戶的選擇操作從控制塊12提供來的控制信號(hào)的控制下，切換器13L和 13R從輸入的M個(gè)類型(例如9個(gè)類型)的視頻源(可以不僅包括3D視頻源而且還包括 2D視頻源)中選擇最多兩個(gè)視頻源，并且把所選擇的視頻源輸出給3D視頻處理塊14。另外，切換器13L和13R選擇M個(gè)輸入的視頻源之一，選擇兩個(gè)或更多個(gè)類型以合成所選的視頻源，并且在選擇之間切換，從而將由此得到的視頻作為經(jīng)編輯的內(nèi)容輸出到后級(jí)。應(yīng)當(dāng)注意，視頻源的左眼用視頻是在切換器13L中輸入的，并且與在切換器13L中輸入的左眼視頻相對(duì)應(yīng)的右眼用視頻是在切換器13R中輸入的。3D視頻處理塊14測(cè)量從切換器13L輸入的左眼視頻和從切換器13R輸入的相應(yīng)右眼視頻的視差，并且基于由此得到的測(cè)量結(jié)果，調(diào)整左眼視頻和右眼視頻的視差。另外， 3D視頻處理塊14保存用于左眼和右眼的視頻并將這些視頻作為靜止圖像輸出。然后，3D 視頻處理塊14輸出經(jīng)處理的視頻來作為要在切換器13L或切換器13R中輸入的視頻源。圖4示出了操作輸入塊11的示例性外部配置。操作輸入塊11被布置有矩陣開關(guān) 21、切換方法選擇開關(guān)22、淡變器控制桿23以及自動(dòng)淡變開關(guān)M。矩陣開關(guān)21由布置成矩陣的水平M個(gè)X垂直N個(gè)開關(guān)構(gòu)成。在圖4所示的示例中，M = 9并且N= 5，達(dá)到總共45個(gè)開關(guān)。矩陣開關(guān)21的水平方向與在切換器13L和切換器13R中輸入的M類視頻源相關(guān)。 在此圖中，從左側(cè)起，按順序是VTRl視頻源、VTR2視頻源、CAMl視頻源、CAM2視頻源、Main 視頻源、Sub視頻源、Fig視頻源、3DB0X1視頻源和3DB0X2視頻源。矩陣開關(guān)21的垂直方向與N類圖像選擇相關(guān)。在圖4中，按順序與作為Keyl的選擇、作為Key2的選擇、作為Outl的選擇、作為0ut2的t選擇和作為0ut3的選擇相關(guān)。 在下文中，將在內(nèi)容切換前的視頻(第一視頻)為Outl并且切換后的視頻(第二視頻)為 0ut2的情況下進(jìn)行描述。應(yīng)當(dāng)注意，每一行(水平方向上)的M個(gè)開關(guān)每次只能被接通一個(gè)。例如，當(dāng)最上方一行的從左端起第二個(gè)開關(guān)被接通時(shí)，VTR2的視頻源被選擇為第一關(guān)鍵視頻(Keyl)。例如，當(dāng)從最上方起第三行的從左端起第三個(gè)開關(guān)被接通時(shí)，CAMl的視頻源被選擇為第一輸出視頻(Outl)。另外，例如，當(dāng)從最上方起第四行的從左端起第四個(gè)開關(guān)被選擇時(shí)，CAM2的視頻源被選擇為第二輸出視頻(0ut2)。切換方法選擇開關(guān)22用于選擇例如用于將顯示中的第一輸出視頻切換到第二輸出視頻的切換方法。例如，每次切換方法選擇開關(guān)22被接通時(shí)，切換方法就從瞬時(shí)切換改變到擦除再改變到混合再改變到瞬時(shí)切換，依此類推。應(yīng)當(dāng)注意，切換方法選擇開關(guān)22可由被指派以瞬時(shí)切換、擦除和混合的三個(gè)開關(guān)構(gòu)成?；蛘?，可以布置擦除的兩個(gè)或更多個(gè)變體(例如數(shù)字特殊效果擦除)。淡變器控制桿23控制將顯示中的第一輸出視頻切換到第二輸出視頻的切換定時(shí)，并且被上下滑動(dòng)以便進(jìn)行控制。淡變器控制桿23被設(shè)定到最頂部位置的狀態(tài)代表切換開始時(shí)間(淡變器值=0%)。淡變器控制桿23被設(shè)定到底部位置的狀態(tài)代表切換結(jié)束時(shí)間(淡變器值=100%)。通過以期望的速度滑動(dòng)淡變器控制桿23，用戶可以根據(jù)需要控制切換速度。應(yīng)當(dāng)注意，可以布置各種控件來允許用戶控制切換操作的細(xì)節(jié)。自動(dòng)淡變開關(guān)M用于自動(dòng)以預(yù)定速度滑動(dòng)淡變器控制桿23。接通自動(dòng)淡變開關(guān) M使得顯示中的第一輸出視頻可被以預(yù)定的速度自動(dòng)切換到第二輸出視頻，而無需用戶操作淡變器控制桿23。圖5示出了切換器13L的示例性配置。切換器13L由輔助輸出塊31和輸入選擇塊32構(gòu)成。應(yīng)當(dāng)注意，切換器13R的配置方式與切換器13L的基本相同，因此省略對(duì)切換器13R的描述。輔助輸出塊31由M類(以下描述為M = 9) SDI輸入線41_1至41_9、輔助輸出選擇總線42-1和42-2以及視頻操縱單元(V Proc)43-1和43-2構(gòu)成。SDI輸入線41-1至41_9分別被輸入以圖4所示的視頻源VTRl、VTR2、CAMl、CAM2、 Main、Sub、Fig、3DB0Xl和3DB0X2。應(yīng)當(dāng)注意，SDI輸入線41-8和41-9被輸入以通過3D視頻處理塊14對(duì)在SDI輸入線41-1至41-7中輸入的視頻源之中的兩類視頻源進(jìn)行處理而獲得的結(jié)果。輔助輸出選擇總線42-1在控制塊12的控制下把在SDI輸入線41_1至41_7中輸入的(用于左眼的)七類視頻源之一輸出到視頻操縱單元43-1。輔助輸出選擇總線42-2 在控制塊12的控制下把在SDI輸入線41-1至41-7中輸入的(用于左眼)的七類視頻源之一輸出到視頻操縱單元43-2。視頻操縱單元43-1對(duì)來自輔助輸出選擇總線42-1的視頻源執(zhí)行預(yù)定的視頻操縱處理并且將經(jīng)處理的視頻源輸出到3D視頻處理塊14。視頻操縱單元43-2對(duì)來自輔助輸出選擇總線42-2的視頻源執(zhí)行預(yù)定的視頻操縱處理并且將經(jīng)處理的視頻源輸出到3D視頻處理塊14。輸入選擇塊32由操縱總線44-1和44_2、輸入總線45_1和45_2、預(yù)留輸入總線 46、關(guān)鍵圖像操縱單元47、視頻操縱單元48-1至48-3以及合成單元49構(gòu)成。操縱總線44-1和44-2在控制塊12的控制下把在SDI輸入線41_1至41_9中輸入的九類視頻源之一輸出到關(guān)鍵圖像操縱單元47。輸入總線45-1把在SDI輸入線41-1至 41-9中輸入的九類視頻源之一作為在切換由于3D視頻編輯裝置10進(jìn)行的編輯而輸出的內(nèi)容之前的第一視頻輸出到視頻操縱單元48-1。輸入總線45-2把在SDI輸入線41_1至41_9 中輸入的九類視頻源之一作為在切換由于3D視頻編輯裝置10進(jìn)行的編輯而輸出的內(nèi)容之前的第二視頻輸出到視頻操縱單元48-2。預(yù)留輸入總線46把在SDI輸入線41_1至41_9 中輸入的九類視頻源之一作為預(yù)留的第三視頻輸出到視頻操縱單元48-3。關(guān)鍵圖像操縱單元47以從操縱總線44-1和44_2輸入的視頻源作為關(guān)鍵圖像來執(zhí)行預(yù)定的操縱處理，并且將由此得到的視頻輸出到輔助輸出選擇總線42-1和42-2和合成單元49。視頻操縱單元48-1至48-3對(duì)輸入的視頻源執(zhí)行預(yù)定的操作處理，并將由此得到的視頻輸出到合成單元49。在控制塊12的控制下，合成單元49選擇從關(guān)鍵圖像操縱單元47和視頻操縱單元 48-1至48-3輸入的視頻并且合成所選的視頻，從而生成作為編輯結(jié)果從輸出線輸出的內(nèi)容的視頻。此外，合成單元49執(zhí)行切換處理，用于從輸入自操縱總線44-1的第一視頻切換到輸入自操縱總線44-2的第二視頻，來作為要作為編輯結(jié)果從輸出線輸出的內(nèi)容的視頻。 稍后將參考圖7來描述此處理的細(xì)節(jié)。圖6示出了 3D視頻處理塊14的示例性配置。3D視頻處理塊14由視差測(cè)量單元 51、比較單元52、幀存儲(chǔ)器53-1至53-4以及圖像處理單元M構(gòu)成。視差測(cè)量單元51測(cè)量經(jīng)由輸入線INLl從切換器13L輸入的左眼視頻源和經(jīng)由輸入線INRl從切換器13R輸入的右眼視頻源的視差。此外，視差測(cè)量單元51計(jì)算根據(jù)所測(cè)量到的視差而獲得的深度(第一深度)，并且將所獲得的深度輸出到比較單元52。應(yīng)當(dāng)注意，為了區(qū)分深度在畫面前方(朝著觀看者)的情況和深度在畫面后方的情況，例如，畫面前方的深度由負(fù)值指示，而畫面后方的畫面由正值指示。因?yàn)橐暡詈蜕疃仍谡麄€(gè)畫面上不是明顯統(tǒng)一的，所以對(duì)于視差和深度值使用最大值、最小值或模式值。視差測(cè)量單元51還測(cè)量經(jīng)由輸入線INL2從切換器13L輸入的左眼視頻源和經(jīng)由輸入線INR2從切換器13R輸入的與該左眼視頻源相對(duì)應(yīng)的右眼視頻源的視差。此外，視差測(cè)量單元51計(jì)算通過測(cè)量到的視差而獲得的深度(第二深度)并將所獲得的深度輸出到比較單元52。應(yīng)當(dāng)注意，視差的測(cè)量和深度的計(jì)算可通過應(yīng)用現(xiàn)有技術(shù)來執(zhí)行。另外，視差測(cè)量單元51把測(cè)量了視差的視頻源輸出到幀存儲(chǔ)器53-1至53_4。比較單元52把從視差測(cè)量單元51輸入的第一深度與第二深度之間的差異與預(yù)定閾值相比較，并且把比較結(jié)果通知給控制塊12。幀存儲(chǔ)器53-1在順序地保存幀的同時(shí)把經(jīng)由輸入線INLl從切換器13L輸入的測(cè)量了視差的左眼視頻源的幀輸出到圖像處理單元M。幀存儲(chǔ)器53-2在順序地保存幀的同時(shí)把經(jīng)由輸入線INL2從切換器13L輸入的測(cè)量了視差的左眼視頻源的幀輸出到圖像處理單元M。幀存儲(chǔ)器53-3在順序地保存幀的同時(shí)把經(jīng)由輸入線INRl從切換器13R輸入的測(cè)量了視差的右眼視頻源的幀輸出到圖像處理單元M。幀存儲(chǔ)器53-4在順序地保存幀的同時(shí)把經(jīng)由輸入線INR2從切換器13R輸入的測(cè)量了視差的右眼視頻源的幀輸出到圖像處理單元54ο圖像處理單元M調(diào)整來自幀存儲(chǔ)器53-1的左眼視頻源和來自幀存儲(chǔ)器53-3的相應(yīng)右眼視頻源的視差并且分別經(jīng)由OUTLl和OUTRl把由此得到的左眼視頻源和右眼視頻源輸出到切換器13L和切換器13R。此外，圖像處理單元M調(diào)整來自幀存儲(chǔ)器53-2的左眼視頻源和來自幀存儲(chǔ)器53-4的相應(yīng)右眼視頻源的視差并且分別經(jīng)由0UTL2和0UTR2把由此得到的左眼視頻源和右眼視頻源輸出到切換器13L和切換器13R。應(yīng)當(dāng)注意，來自幀存儲(chǔ)器53-1至53-4的視頻源可被直接輸出到切換器13L和切換器13R，而無需圖像處理單元 M調(diào)整視差。[對(duì)操作1的描述]以下描述3D視頻編輯裝置10的操作，其中，例如，在要輸入到3D視頻編輯裝置10 中的視頻源之中，CAMl的視頻源被用于要輸出的內(nèi)容，然后CAMl視頻源被切換到CAM2視頻源。首先，為了將CAMl視頻源設(shè)定成切換前的視頻(第一視頻)，用戶接通操作輸入塊 11的矩陣開關(guān)21的從最上方起第三行的左端起第三個(gè)開關(guān)。另外，為了預(yù)先將CAM2視頻源指定為切換后的視頻(第二視頻)，用戶接通矩陣開關(guān)21的從最上方起第四行的左端起第四個(gè)開關(guān)。另外，用戶通過對(duì)操作輸入塊11的切換方法選擇開關(guān)22進(jìn)行操作來選擇切
換方法之一。在響應(yīng)于對(duì)矩陣開關(guān)21進(jìn)行的用戶操作的控制塊12的控制下，在SDI輸入線 41-3中輸入的CAMl的左眼視頻源在切換器13L的輸入總線45_1上被選擇來經(jīng)由視頻操縱單元48-1輸入到合成單元49中。另外，在SDI輸入線41-4中輸入的CAM2的左眼視頻源在輸入總線45-2上被選擇并且所選擇的視頻源被經(jīng)由視頻操縱單元48-2輸入到合成單元 49中。然后，因?yàn)楫?dāng)前是在視頻切換之前，所以CAMl的左眼視頻源被從合成單元49輸出。 類似地，對(duì)于切換器13R，CAMl的右眼視頻源被從輸出線輸出。另外，在響應(yīng)于對(duì)矩陣開關(guān)21進(jìn)行的用戶操作的控制塊12的控制下，在SDI輸入線41-3中輸入的CAMl的左眼視頻源在輔助輸出選擇總線42-1上被選擇并且所選擇的視頻源被經(jīng)由輸入線INLl輸入到3D視頻處理塊14的視差測(cè)量單元51中。在SDI輸入線 41-4中輸入的CAM2的左眼視頻源被輔助輸出選擇總線42-2選擇并且所選擇的視頻源被經(jīng)由輸入線INL2輸入到3D視頻處理塊14的視差測(cè)量單元51中。另一方面，對(duì)于切換器13R，CAMl的右眼視頻源被選擇并且所選擇的視頻源被經(jīng)由輸入線INRl輸入到3D視頻處理塊14的視差測(cè)量單元51中，并且CAM2的右眼視頻源被選擇并且所選擇的視頻源被經(jīng)由輸入線INR2輸入到3D視頻處理塊14的視差測(cè)量單元51中。視差測(cè)量單元51計(jì)算基于CAMl視頻源的視差的第一深度和基于CAM2視頻源的視差的第二深度，并且把計(jì)算出的深度輸出到比較單元52。比較單元52把第一深度與第二深度之間的差異與預(yù)定閾值相比較并且把比較結(jié)果通知給控制塊12?；谕ㄖ獊淼谋容^結(jié)果和通過切換方法選擇開關(guān)22所做的選擇，控制塊12判定是否要使能對(duì)所選擇的切換方法的執(zhí)行。接下來，僅當(dāng)所選切換方法的執(zhí)行被使能時(shí)，才會(huì)在用戶滑動(dòng)淡變器控制桿23時(shí)或者用戶按壓自動(dòng)淡變開關(guān)M時(shí)由合成單元49通過所選的切換方法將CAMl視頻切換到 CAM2視頻。然而，在切換時(shí)段(從淡變器值0%到100%的時(shí)段)中，在SDI輸入線41-8中輸入的、經(jīng)過3D視頻處理塊14的CAMl的左眼視頻源在切換器13L的輸入總線45_1上被選擇，并且在SDI輸入線41-9中輸入的、經(jīng)過3D視頻處理塊14的左眼視頻源在輸入總線 45-2上被選擇。對(duì)于切換器13R也是如此。因此，在切換時(shí)段期間，使用經(jīng)過3D視頻處理塊14的視頻。應(yīng)當(dāng)注意，根據(jù)上述操作，視頻在切換時(shí)段中也是運(yùn)動(dòng)圖像；切換時(shí)段中的視頻是靜止圖像也是可行的。在此情況下，3D視頻處理塊14可被配置為輸出在包含的幀存儲(chǔ)器 53中保存的靜止圖像。在運(yùn)動(dòng)圖像的情況下，深度不時(shí)地變化，從而在該時(shí)段期間情形可能有很大變化。然而，在切換時(shí)段期間使用靜止圖像防止了切換期間的視頻使觀看者有違和感或者加重觀看者眼睛的負(fù)擔(dān)。另外，也可以在切換時(shí)段期間輸出靜止圖像，并且在繼續(xù)開始使用之后輸入的運(yùn)動(dòng)圖像時(shí)，對(duì)存儲(chǔ)在幀存儲(chǔ)器53中的靜止圖像以及隨后預(yù)定持續(xù)時(shí)間中的運(yùn)動(dòng)圖像(例如 30個(gè)幀)執(zhí)行混合效果(淡入和淡出)，從而執(zhí)行進(jìn)一步減輕觀看者的違和感的切換。圖7示出了指示出在上述操作中判定是否使能對(duì)所選切換方法的執(zhí)行的處理(以下稱為許可判決處理)的流程圖。在步驟Sl中，控制塊12獲得由用戶通過操作輸入塊11的切換方法選擇開關(guān)22 選擇的切換方法亦即瞬時(shí)切換、擦除和混合之一。在步驟S2中，控制塊12判定所選切換方法是否是擦除。如果發(fā)現(xiàn)所選切換方法是擦除，則過程轉(zhuǎn)到步驟S3。在步驟S3中，3D視頻處理塊14的視差測(cè)量單元51測(cè)量第一視頻(在此示例中是 CAMl的視頻源)的視差以計(jì)算基于所獲得的視差的第一深度，并將計(jì)算出的深度輸出到比較單元52。在步驟S4中，視差測(cè)量單元51測(cè)量第二視頻(在此示例中是CAM2的視頻源) 的視差以計(jì)算基于所獲得的視差的第二深度，并將計(jì)算出的深度輸出到比較單元52。在步驟S5中，比較單元52計(jì)算第一深度與第二深度之間的差異并將所獲得的差異與預(yù)定閾值相比較，并將比較結(jié)果通知給控制塊12?；谕ㄖ獊淼谋容^結(jié)果，控制塊12 判定第一深度與第二深度之間的差異是否等于或高于該預(yù)定閾值。如果發(fā)現(xiàn)此差異不是等于或高于該預(yù)定閾值(或者說小于該預(yù)定閾值)，則過程進(jìn)到步驟S6。在步驟S6中，控制塊12把對(duì)用戶選擇的切換方法(在此示例中是擦除)的許可通知給合成單元49。因此，合成單元49在用戶滑動(dòng)淡變器控制桿23時(shí)或者在用戶按壓自動(dòng)淡變開關(guān)M時(shí)通過所選切換方法把內(nèi)容的視頻從提供自輸入總線45-1的第一視頻源切換到提供自輸入總線45-2的視頻源。應(yīng)當(dāng)注意，如果發(fā)現(xiàn)第一視頻深度與第二視頻深度之間的差異等于或高于該預(yù)定閾值，則過程進(jìn)到步驟S7。在步驟S7中，控制塊12把不使能用戶選擇的切換方法(在此示例中是擦除)通知給合成單元49。因此，合成單元49在用戶滑動(dòng)淡變器控制桿23或者按壓自動(dòng)淡變開關(guān)M時(shí)不會(huì)執(zhí)行切換。即，基于擦除的切換被禁止。然而，也可以通過不是擦除的另一種切換方法(例如瞬時(shí)切換)來執(zhí)行切換，而不是禁止切換本身。在此情況下，可以提供一種手段，以便通過把切換方法的改變反映到操作輸入塊 11的切換方法選擇開關(guān)22的狀態(tài)上，來使得用戶可以認(rèn)識(shí)到當(dāng)前設(shè)定的切換方法。更具體而言，每種切換方法例如由操作輸入塊11的切換方法選擇開關(guān)22的閃爍來指示，以便認(rèn)識(shí)到每種切換方法。另外，如果切換到不是擦除的另一種切換方法，則可以例如通過單獨(dú)布置的蜂鳴器或指示器利用警報(bào)來將該改變通知給用戶。應(yīng)當(dāng)注意，如果切換已經(jīng)開始并且在切換時(shí)段期間切換仍在進(jìn)行，則最好抑制新的切換操作。如果在上次切換仍在進(jìn)行的同時(shí)進(jìn)行新的切換，則可以例如通過指示器利用警報(bào)來將這種情形通知給用戶。如果在步驟S2中發(fā)現(xiàn)所選切換方法不是擦除(即發(fā)現(xiàn)是瞬時(shí)切換或混合)，則過程進(jìn)到步驟S6。
在步驟S6中，控制塊12把使能由用戶選擇的切換方法(在此情況下是瞬時(shí)切換或混合)通知給合成單元49。因此，合成單元49在用戶滑動(dòng)淡變器控制桿23時(shí)或按壓自動(dòng)淡變開關(guān)M時(shí)通過所選切換方法把內(nèi)容的視頻從提供自輸入總線45-1的第一視頻源切換到提供自輸入總線45-2的第二視頻源。從而，對(duì)許可判決處理的描述已完成。如上所述，根據(jù)3D視頻編輯裝置10，可以通過瞬時(shí)切換、擦除或混合來實(shí)現(xiàn)3D視頻切換，從而能夠增強(qiáng)要輸出的內(nèi)容的表現(xiàn)力和附加價(jià)值。然而，應(yīng)當(dāng)注意，如果用戶選擇了擦除作為切換方法，但是第一視頻深度與第二視頻深度之間的差異等于或高于預(yù)定閾值，則基于擦除的切換被禁止，從而能夠減輕看到切換中的視頻的觀看者的違和感和眼睛的負(fù)擔(dān)。應(yīng)當(dāng)注意，在上述示例中，擦除被用于切換方法；在兩個(gè)視頻的區(qū)域在畫面中彼此分開的特殊效果的情況下，應(yīng)用與上述基本相同的處理。對(duì)于數(shù)字特殊效果裝置的使用也是如此。因?yàn)槟軌蚴冀K執(zhí)行對(duì)視差的測(cè)量，所以可以始終在布置于操作裝置上的指示器上指示出是否始終使能擦除。可通過軟件也可通過硬件來執(zhí)行上述處理操作序列。當(dāng)通過軟件來執(zhí)行上述處理操作序列時(shí)，構(gòu)成軟件的程序被安裝在內(nèi)置于專用硬件設(shè)備的計(jì)算機(jī)中，或者被從網(wǎng)絡(luò)或記錄介質(zhì)安裝到例如通用個(gè)人計(jì)算機(jī)中，在該通用個(gè)人計(jì)算機(jī)中可以安裝各種程序以用于執(zhí)行各種功能。圖6示出了另一種3D視頻處理塊14的示例性配置。此3D視頻處理塊14由視差測(cè)量單元51、視差調(diào)整單元(或圖像處理單元)54和存儲(chǔ)器53構(gòu)成。視差測(cè)量單元51測(cè)量經(jīng)由輸入線INLl從切換器13L輸入的左眼視頻源(第一視頻源)和經(jīng)由輸入線INRl從切換器13R輸入的與該左眼視頻源相對(duì)應(yīng)的右眼視頻源(第一視頻源)的視差。此外，視差測(cè)量單元51計(jì)算通過所測(cè)量到的視差而獲得的深度(第一深度)，并且將所獲得的深度輸出到視差調(diào)整單元M。應(yīng)當(dāng)注意，為了區(qū)分在畫面前方朝著觀看者的深度和在畫面后方的深度，例如，前者由正值指示，而后者由負(fù)值指示。因?yàn)橐暡詈蜕疃仍谡麄€(gè)畫面上不是明顯統(tǒng)一的，所以對(duì)于視差和深度值使用最大值、最小值或模式值。視差測(cè)量單元51還測(cè)量經(jīng)由輸入線INL2從切換器13L輸入的左眼視頻源(第二視頻源)和經(jīng)由輸入線INR2從切換器13R輸入的與該左眼視頻源相對(duì)應(yīng)的右眼視頻源 (第二視頻源)的視差。此外，視差測(cè)量單元51計(jì)算通過測(cè)量到的視差獲得的深度(第二深度)并將所獲得的深度輸出到視差調(diào)整單元M。應(yīng)當(dāng)注意，視差的測(cè)量和深度的計(jì)算可通過應(yīng)用現(xiàn)有技術(shù)來執(zhí)行。另外，視差測(cè)量單元51把測(cè)量了視差的第一和第二視頻源輸出到視差調(diào)整單元 54?；诖鎯?chǔ)在存儲(chǔ)器53中的視差調(diào)整區(qū)間參數(shù)，視差調(diào)整單元M對(duì)從視差測(cè)量單元51輸入的第一視頻源和第二視頻源中至少一個(gè)的視差進(jìn)行調(diào)整并且經(jīng)由輸出線OUTLl 或OUTRl將經(jīng)調(diào)整的視頻源輸出到切換器13L或切換器13R。存儲(chǔ)器53存儲(chǔ)調(diào)整第一和第二視頻源的視差的定時(shí)以及指示出淡變器值關(guān)系的視差調(diào)整區(qū)間參數(shù)。應(yīng)當(dāng)注意，存儲(chǔ)器53可僅存儲(chǔ)在圖8至圖14中示出的視差調(diào)整區(qū)間參數(shù)中的至少一個(gè)。
[對(duì)操作2的描述]以下描述3D視頻編輯裝置10的操作，其中，在輸入到3D視頻編輯裝置10中的視頻源之中，CAMl視頻源被用于要輸出的內(nèi)容的視頻，然后此CAMl視頻源通過擦除被切換到 CAM2 源。首先，為了將CAMl視頻源設(shè)定成切換前的視頻(第一視頻)，用戶接通操作輸入塊 11的矩陣開關(guān)21的從最上方起第三行的左端起第三個(gè)開關(guān)。此外，為了將CAM2視頻源指定為切換后的視頻(第二視頻)，用戶接通矩陣開關(guān)21的從最上方起第四行的左端起第四個(gè)開關(guān)。另外，用戶通過操作輸入塊11的切換方法選擇開關(guān)22來選擇擦除作為切換方法。在響應(yīng)于對(duì)矩陣開關(guān)21進(jìn)行的用戶操作的控制塊12的控制下，在SDI輸入線 41-3中輸入的CAMl的左眼視頻源在切換器13L的輸入總線45_1上被選擇并且所選擇的視頻源被通過視頻操縱單元48-1輸入到合成單元49中。在SDI輸入線41-4中輸入的CAM2 的左眼視頻源在切換器13L的輸入總線45-2上被選擇并且所選擇的視頻源被通過視頻操縱單元48-2輸入到合成單元49中。然后，因?yàn)楝F(xiàn)在是在視頻切換之前，所以合成單元49 輸出CAMl的左眼視頻源。對(duì)于切換器13R，CAM1的右眼視頻源以與左眼視頻源基本相同的方式被從輸出線輸出。在響應(yīng)于對(duì)矩陣開關(guān)21進(jìn)行的用戶操作的控制塊12的控制下，在SDI輸入線 41-3中輸入的CAMl的左眼視頻源在切換器13L的輔助輸出選擇總線42_1上被選擇并且所選擇的視頻源被經(jīng)由輸入線INLl輸入到3D視頻處理塊14的視差測(cè)量單元51中。在SDI 輸入線41-4中輸入的CAM2的左眼視頻源在切換器13L的輔助輸出選擇總線42_2上被選擇并且所選擇的視頻源被經(jīng)由輸入線INL2輸入到3D視頻處理塊14的視差測(cè)量單元51中。另一方面，對(duì)于切換器13R，CAMl的右眼視頻源被選擇并且所選擇的視頻源被經(jīng)由輸入線INRl輸入到3D視頻處理塊14的視差測(cè)量單元51中，并且CAM2的右眼視頻源被選擇并且所選擇的視頻源被經(jīng)由輸入線INR2輸入到3D視頻處理塊14的視差測(cè)量單元51 中。視差測(cè)量單元51基于CAMl視頻源的視差計(jì)算第一深度并且基于CAM2視頻源的視差計(jì)算第二深度，并把計(jì)算出的深度輸出到視差調(diào)整單元54。基于存儲(chǔ)在存儲(chǔ)器53中的視差調(diào)整區(qū)間參數(shù)，視差調(diào)整單元M與淡變器值相對(duì)應(yīng)地調(diào)整CAMl視頻源和CAM2視頻源中的至少一個(gè)的視差，并且經(jīng)由輸出線OUTLl至0UTR2將經(jīng)調(diào)整的視差輸出到切換器13L 和切換器13R。在切換時(shí)段(從淡變器值0%到100%的時(shí)段)中，在SDI輸入線41-8中輸入的、 被3D視頻處理塊14調(diào)整了視差的CAMl的左眼視頻源在切換器13L的輸入總線45_1上被選擇，并且在SDI輸入線41-9中輸入的、被3D視頻處理塊14調(diào)整了視差的CAM2的左眼視頻源在輸入總線45-2上被選擇。對(duì)于切換器13R也是如此。因此，在切換時(shí)段期間，使用被3D視頻處理塊14調(diào)整了視差的視頻。[視差調(diào)整的具體示例]下面具體描述當(dāng)基于擦除從第一視頻切換到第二視頻時(shí)執(zhí)行的視差調(diào)整。圖8示出了存儲(chǔ)器53中保存的視差調(diào)整區(qū)間參數(shù)的第一示例的圖線。在圖8中， 橫軸表示淡變器值，而縱軸表示基于視差的深度。實(shí)線表示第一視頻源，而虛線表示第二視頻源。粗線表示擦除實(shí)際發(fā)生的時(shí)間段。右上方示出的值指示出作為淡變器值的視差調(diào)整區(qū)間參數(shù)的示例。對(duì)于后面的示圖也是如此。在圖8中，第二視頻源的視差不被調(diào)整。第一視頻源的視差被調(diào)整，以使得基于第一視頻源的視差的深度接近第二視頻源的視差。具體而言，在淡變器值0%至45%的區(qū)間 (第一調(diào)整區(qū)間)中，逐漸使第一視頻源的視差與第二視頻源的視差相匹配。在此區(qū)間中， 只顯示第一視頻源。然后，在淡變器值45%至100%的區(qū)間(擦除區(qū)間)中，執(zhí)行擦除以將第一視頻源切換到第二視頻源。應(yīng)當(dāng)注意，這里的“匹配”除了完全匹配以外也包括第一和第二視頻源的視差之間的差異低于預(yù)定閾值。圖9示出了存儲(chǔ)器53中保存的視差調(diào)整區(qū)間參數(shù)的第二示例的圖線。在圖9中， 第一視頻源的視差不被調(diào)整。第二視頻源的視差被調(diào)整，以使得基于第二視頻源的視差的深度接近第一視頻源的視差。具體而言，當(dāng)?shù)兤髦禐?%時(shí)，第二視頻源的視差立即與第一視頻源的視差相匹配。然后，在淡變器值0%至70%的區(qū)間(擦除區(qū)間)中，執(zhí)行擦除以將第一視頻源切換到第二視頻源，并且在淡變器值70%至100%的區(qū)間(第二調(diào)整區(qū)間) 中，使第二視頻源的視差逐漸返回到原始值。圖10示出了存儲(chǔ)器53中保存的視差調(diào)整區(qū)間參數(shù)的第三示例的圖線。在圖10 中，第一和第二視頻源的視差被調(diào)整，以使得基于第一和第二視頻源的視差的深度在其間的中間點(diǎn)上相互匹配。更具體而言，在獲得中間值之后，在淡變器值0%至20%的區(qū)間(第一調(diào)整區(qū)間)中，使第一和第二視頻源的視差逐漸達(dá)到該中間點(diǎn)，從而使兩個(gè)視差相互匹配。在此區(qū)間中，只顯示第一視頻源。然后，在淡變器值20%至70%的區(qū)間(擦除區(qū)間) 中，執(zhí)行擦除以將第一視頻源切換到第二視頻源。接下來，在淡變器值70%至100%的區(qū)間 (第二調(diào)整區(qū)間)中，使第二視頻源的視差逐漸返回到原始值(被改變之前的輸入值)。圖11示出了存儲(chǔ)器53中保存的視差調(diào)整區(qū)間參數(shù)的第四示例的圖線。在圖11 中，第一和第二視頻源的視差被調(diào)整，以使得從第一和第二視頻源的深度相互匹配的狀態(tài)起，基于第一和第二視頻源的視差的深度被在零處匹配。與以上所述的示例不同，考慮了深度的絕對(duì)值。具體而言，在淡變器值0%至30%的區(qū)間(第一調(diào)整區(qū)間)中，使第一和第二視頻源的視差逐漸達(dá)到零以使兩個(gè)視差相匹配。在此區(qū)間中，只顯示第一視頻源。然后，在淡變器值30%至70%的區(qū)間(擦除區(qū)間)中，執(zhí)行擦除以將第一視頻源切換到第二視頻源。接下來，在淡變器值70%至100%的區(qū)間(第二調(diào)整區(qū)間)中，使第二視頻源的視差逐漸返回到原始值。圖12示出了存儲(chǔ)器53中保存的視差調(diào)整區(qū)間參數(shù)的第五示例的圖線。在圖12 中，第一和第二視頻源的視差被調(diào)整，以使得從第一和第二視頻源的深度相互不匹配的狀態(tài)起，基于第一和第二視頻源的視差的深度被在零處匹配。更具體而言，在淡變器值0%至 30%的區(qū)間(第一調(diào)整區(qū)間)中，使第一和第二視頻源的視差逐漸達(dá)到零以使兩個(gè)視差相互匹配。在此區(qū)間中，只顯示第一視頻源。然后，在淡變器值30%至70%的區(qū)間(擦除區(qū)間)中，執(zhí)行擦除以將第一視頻源切換到第二視頻源。接下來，在淡變器值70%至100%的區(qū)間(第二調(diào)整區(qū)間)中，使第二視頻源的視差逐漸返回到原始值。圖13示出了存儲(chǔ)器53中保存的視差調(diào)整區(qū)間參數(shù)的第六示例的圖線。在圖13 中，第一和第二視頻源的視差被調(diào)整，以使得從第一和第二視頻源的深度相互匹配的狀態(tài)起，基于第一和第二視頻源的視差的深度被在零處匹配。在此情況下，第一和第二調(diào)整區(qū)間是基于第一視頻源的深度與第二視頻源的深度之間的比率來確定的。例如，如果此比率是 1 4，則第一調(diào)整區(qū)間與第二調(diào)整區(qū)間之間的比率也是1 4。即，在淡變器值0%至40% 的區(qū)間(第一調(diào)整區(qū)間)中，使第一和第二視頻源的視差逐漸達(dá)到零以使兩個(gè)視差相互匹配。然后，在淡變器值40%至90%的區(qū)間(擦除區(qū)間)中，執(zhí)行擦除以將第一視頻源切換到第二視頻源。接下來，在淡變器值90%至100%的區(qū)間(第二調(diào)整區(qū)間)中，使第二視頻源的視差逐漸返回到原始值。圖14示出了存儲(chǔ)器53中保存的視差調(diào)整區(qū)間參數(shù)的第七示例的圖線。在圖14 中，第一和第二視頻源的視差被調(diào)整，以在逐漸使基于第一和第二視頻源的視差的深度相互接近從而相互匹配之后，在被擦除的同時(shí)視差線性變化。更具體而言，在淡變器值0%至 30%的區(qū)間(第一調(diào)整區(qū)間)中，逐漸使第一和第二視頻源的視差相互接近以相互匹配。在此區(qū)間中，只顯示第一視頻源。然后，在淡變器值30%至70%的區(qū)間(擦除區(qū)間和第二調(diào)整區(qū)間)中，在執(zhí)行擦除的同時(shí)，在第一和第二視頻源的視差相互匹配的情況下繼續(xù)調(diào)整。 在淡變器值70%至100%的區(qū)間(第二調(diào)整區(qū)間)中，使第二視頻源的視差返回到原始值。如果通過擦除將第一視頻源切換到第二視頻源，則如圖8至14的任何一幅圖中所示的那樣執(zhí)行視差調(diào)整。[涉及視差調(diào)整的切換處理]下面描述涉及視差調(diào)整的切換處理。圖15是指示出此切換處理的流程圖。應(yīng)當(dāng)注意，此切換處理假定用戶已經(jīng)選擇了第一和第二視頻源。圖15所示的處理是針對(duì)每一幀或每一場(chǎng)執(zhí)行的。在步驟Si，控制塊12開始獲得與操作輸入塊11的淡變器控制桿23的位置相對(duì)應(yīng)的淡變器值。在步驟S2中，控制塊12獲得關(guān)于用戶通過操作輸入塊11的切換方法選擇開關(guān)22選擇的切換方法是瞬時(shí)切換、擦除還是混合的信息。在步驟S3中，控制塊12判定所選擇的切換方法是否是擦除。如果發(fā)現(xiàn)所選切換是擦除，則過程進(jìn)到步驟S4。在步驟S4中，3D視頻處理塊14的視差測(cè)量單元51測(cè)量第一視頻源的視差以計(jì)算基于測(cè)量到的視差的第一深度，并將計(jì)算出的深度輸出到視差調(diào)整單元M。同時(shí)，視差測(cè)量單元51測(cè)量第二視頻源的視差以計(jì)算基于測(cè)量到的視差的第二深度，并將計(jì)算出的深度輸出到視差調(diào)整單元54。視差調(diào)整單元M從存儲(chǔ)器53中讀取視差調(diào)整區(qū)間參數(shù)并將該參數(shù)提供給控制塊12。在步驟S5中，控制塊12基于淡變器值和視差調(diào)整區(qū)間參數(shù)來判定當(dāng)前是否在第一調(diào)整區(qū)間或第二調(diào)整區(qū)間中。如果發(fā)現(xiàn)當(dāng)前在第一調(diào)整區(qū)間或第二調(diào)整區(qū)間中，則過程進(jìn)到步驟S6。如果發(fā)現(xiàn)當(dāng)前不在第一調(diào)整區(qū)間或第二調(diào)整區(qū)間中，即當(dāng)前在擦除區(qū)間中，則過程進(jìn)到步驟S10，跳過步驟S6至步驟S9。在步驟S6中，控制塊12基于當(dāng)前淡變器值和視差調(diào)整區(qū)間參數(shù)來判定當(dāng)前是否要調(diào)整第一視頻源的視差。如果發(fā)現(xiàn)要調(diào)整第一視頻源的視差，則過程進(jìn)到步驟S7。在步驟S7中，控制塊12基于當(dāng)前淡變器值和視差調(diào)整區(qū)間參數(shù)來計(jì)算指示出第一視頻源的調(diào)整量的視差調(diào)整值，從而將計(jì)算出的視差調(diào)整值提供給視差調(diào)整單元M。如果在步驟S6中發(fā)現(xiàn)不調(diào)整第一視頻源的視差，則過程進(jìn)到步驟S8，跳過步驟 S7。在步驟S8中，控制塊12基于當(dāng)前淡變器值和視差調(diào)整區(qū)間參數(shù)來判定當(dāng)前是否要調(diào)整第二視頻源的視差。如果發(fā)現(xiàn)要調(diào)整第二視頻源的視差，則過程進(jìn)到步驟S9。在步驟S9中，控制塊12基于當(dāng)前淡變器值和視差調(diào)整區(qū)間參數(shù)來計(jì)算指示出第二視頻源的調(diào)整量的視差調(diào)整值，從而將計(jì)算出的視差調(diào)整值提供給視差調(diào)整單元M。如果在步驟S8中發(fā)現(xiàn)不調(diào)整第二視頻源的視差，則過程進(jìn)到步驟S10，跳過步驟 S9。在步驟SlO中，視差調(diào)整單元M根據(jù)從控制塊12提供的調(diào)整量來調(diào)整第一視頻源的視差，并且將調(diào)整后的視差輸出到后級(jí)。同時(shí)，視差調(diào)整單元M根據(jù)從控制塊12提供的調(diào)整量來調(diào)整第二視頻源的視差，并且將調(diào)整后的視差輸出到后級(jí)。應(yīng)當(dāng)注意，如果經(jīng)過步驟S6和步驟S8沒有提供視差調(diào)整的量，則不調(diào)整視差。如果從步驟S5轉(zhuǎn)移到步驟S10， 即如果當(dāng)前在擦除時(shí)段中，則通過維持到目前為止提供的視差調(diào)整量來調(diào)整視差。在步驟Sll中，控制塊12基于通過視差調(diào)整區(qū)間參數(shù)獲得的擦除區(qū)間和當(dāng)前淡變器值來計(jì)算第一視頻源與第二視頻源之間的當(dāng)前顯示比率(占據(jù)畫面的比率)，并將計(jì)算出的顯示比率提供給切換器13L和切換器13R的合成單元49。在步驟S12中，合成單元49 根據(jù)提供的顯示比率來合成第一視頻和第二視頻，并將合成的視頻輸出到后級(jí)。在步驟S13中，控制塊12基于當(dāng)前淡變器值判定切換是否已完成(淡變器值是不是100%)。如果發(fā)現(xiàn)切換沒有完成，則過程返回到步驟Si，以從該處起重復(fù)上述處理。如果在步驟S13中發(fā)現(xiàn)切換完成，則此切換處理結(jié)束。應(yīng)當(dāng)注意，如果發(fā)現(xiàn)所選擇的切換方法不是擦除，即所選擇的切換是瞬時(shí)切換或混合，則過程進(jìn)到步驟S14。在此情況下，不調(diào)整第一和第二視頻源的視差。在步驟S14中，控制塊12基于當(dāng)前淡變器值來計(jì)算第一視頻源與第二視頻源之間的當(dāng)前混合比率，并將計(jì)算出的混合比率提供給切換器13L和切換器13R的合成單元49。 合成單元49根據(jù)提供的混合比率來合成第一視頻源和第二視頻源，并將合成的視頻輸出到后級(jí)。在步驟S15中，控制塊12基于當(dāng)前淡變器值判定切換是否已完成(淡變器值是不是100% )。如果發(fā)現(xiàn)切換沒有完成，則過程返回到步驟Si，以從該處起重復(fù)上述處理，直到發(fā)現(xiàn)切換完成為止。如果發(fā)現(xiàn)切換完成，則此切換處理結(jié)束。根據(jù)以上所述的切換處理，當(dāng)通過擦除從第一視頻源切換到第二視頻源時(shí)，在第一視頻和第二視頻兩者同時(shí)存在的擦除時(shí)段中，使第一視頻源的視差和第二視頻源的視差相互匹配。此配置減輕了看到被切換的視頻的觀看者的違和感或眼睛的負(fù)擔(dān)。此外，對(duì)第一和第二視頻源的視差的調(diào)整是聯(lián)系用戶可控制的淡變器值來執(zhí)行的，從而允許了與用戶意圖相符的切換。[變體 1]對(duì)于第一和第二視頻，在這些視頻的畫面上可存在各種對(duì)象，從而深度具有不同的距離。更具體而言，如果如上所述執(zhí)行視差調(diào)整，則如圖16所示在擦除區(qū)間中實(shí)際也導(dǎo)致了基于視差的深度的差異。為了解決此問題，如圖17所示，當(dāng)調(diào)整第一和第二視頻源的視差時(shí)，可以壓縮第一和第二視頻源中至少一個(gè)的深度的距離以使兩個(gè)深度的距離相匹配。此壓縮消除了觀看者在視頻切換時(shí)感到的違和感。[變體 2]
在上述切換處理中，僅對(duì)基于擦除的切換執(zhí)行視差調(diào)整。也可以在基于混合的切換時(shí)執(zhí)行視差調(diào)整。圖18示出了基于混合將第一視頻源切換到第二視頻源的視差調(diào)整的示例。在混合的情況下，不必像圖8至圖14所示的擦除處理那樣使第一視頻源的深度與第二視頻源的深度相匹配。更具體而言，如圖18所示，在淡變器值的初始階段中將第二視頻源的深度維持恒定，使第一視頻源的深度逐漸接近第二視頻源的深度，并且在淡變器值的最終階段中使第二視頻源的深度逐漸返回到原始值。在混合的情況下，上述視差調(diào)整進(jìn)一步平滑了從第一視頻源到第二視頻源的切換。應(yīng)當(dāng)注意，本發(fā)明的實(shí)施例可應(yīng)用到在相機(jī)拍攝視頻之后立即將所拍攝的視頻實(shí)況廣播的廣播臺(tái)的系統(tǒng)以及用于對(duì)例如存儲(chǔ)在VTR中的視頻進(jìn)行編輯并將經(jīng)編輯的視頻作為完整的節(jié)目存儲(chǔ)在VTR中的編輯系統(tǒng)?？赏ㄟ^軟件也可通過硬件來執(zhí)行上述處理操作序列。當(dāng)通過軟件來執(zhí)行上述處理操作序列時(shí)，構(gòu)成軟件的程序被安裝在內(nèi)置于專用硬件設(shè)備的計(jì)算機(jī)中，或者被從網(wǎng)絡(luò)或記錄介質(zhì)安裝到例如通用個(gè)人計(jì)算機(jī)中，在該通用個(gè)人計(jì)算機(jī)中可以安裝各種程序以用于執(zhí)行各種功能。圖19是示出通過計(jì)算機(jī)程序執(zhí)行上述各種處理操作的計(jì)算機(jī)示例性硬件配置的框圖。在計(jì)算機(jī)100中，CPU(中央處理單元)101、R0M(只讀存儲(chǔ)器)102、RAM(隨機(jī)訪問存儲(chǔ)器)103通過總線104互連?？偩€104還連接到輸入/輸出接口 105。輸入/輸出接口 105連接到例如由鍵盤、 鼠標(biāo)和麥克風(fēng)構(gòu)成的輸入塊106、例如由顯示監(jiān)視器和揚(yáng)聲器構(gòu)成的輸出塊107、例如基于硬盤和非易失性存儲(chǔ)器的存儲(chǔ)塊108、例如基于網(wǎng)絡(luò)接口的通信塊109、以及用于驅(qū)動(dòng)諸如磁盤、光盤、磁光盤或半導(dǎo)體存儲(chǔ)器之類的可移除介質(zhì)111的驅(qū)動(dòng)器110。在如上所述配置的計(jì)算機(jī)100中，CPU 101經(jīng)由輸入/輸出接口 105和總線104把程序從存儲(chǔ)塊108加載到RAM 103中以執(zhí)行該程序，從而執(zhí)行上述處理操作序列。應(yīng)當(dāng)注意，計(jì)算機(jī)要執(zhí)行的程序可以根據(jù)這里描述的序列以與時(shí)間有關(guān)的方式執(zhí)行處理操作，或者以并行或按需的方式執(zhí)行處理操作。還應(yīng)當(dāng)注意，計(jì)算機(jī)要執(zhí)行的程序可以由計(jì)算機(jī)的一個(gè)單元來處理，或者由計(jì)算機(jī)的兩個(gè)或更多個(gè)單元以分布方式處理。此外，程序可被傳送到遠(yuǎn)程計(jì)算機(jī)以便執(zhí)行。雖然已經(jīng)利用具體術(shù)語描述了本發(fā)明的優(yōu)選實(shí)施例，但是這種描述只是出于例示目的的，要理解在不脫離所附權(quán)利要求的精神或范圍的情況下可以做出改變和變化。本申請(qǐng)包含與2010年4月7日向日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng)JP 2010-088463和JP 2010-088464中公開的主題相關(guān)的主題，這里通過引用將這些申請(qǐng)的全部?jī)?nèi)容并入。本領(lǐng)域的技術(shù)人員應(yīng)當(dāng)理解，取決于設(shè)計(jì)要求和其他因素，可以進(jìn)行各種修改、組合、子組合和變更，只要它們處于所附權(quán)利要求或其等同物的范圍之內(nèi)即可。
權(quán)利要求
1.一種用于編輯三維視頻的圖像處理裝置，包括切換裝置，用于通過多種切換方法中的任何一種把要被用作編輯結(jié)果的視頻從第一三維視頻切換到第二三維視頻；視差測(cè)量裝置，用于測(cè)量三維視頻中的視差以基于測(cè)量到的視差來計(jì)算三維視頻的深度；比較裝置，用于把對(duì)所述第一三維視頻計(jì)算的第一深度與對(duì)不同于所述第一三維視頻的所述第二三維視頻計(jì)算的第二深度之間的差異與預(yù)定閾值相比較；以及限制裝置，用于根據(jù)由所述比較裝置獲得的比較結(jié)果來限制所述切換裝置的操作。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中所述多種切換方法至少包括擦除，并且如果發(fā)現(xiàn)所述第一深度與所述第二深度之間的差異等于或高于所述預(yù)定閾值，則所述限制裝置控制所述切換裝置來限制通過所述擦除從所述第一三維視頻切換到所述第二三維視頻。
3.根據(jù)權(quán)利要求2所述的圖像處理裝置，還包括保存裝置，用于將所述第一三維視頻和所述第二三維視頻保存為靜止圖像，其中所述切換裝置在所述第一三維視頻被切換到所述第二三維視頻的時(shí)段期間把所述保存裝置中保存的所述靜止圖像用于要被用作編輯結(jié)果的視頻。
4.根據(jù)權(quán)利要求2所述的圖像處理裝置，其中，所述多種切換方法至少包括擦除、瞬時(shí)切換和混合。
5.根據(jù)權(quán)利要求4所述的圖像處理裝置，其中如果發(fā)現(xiàn)所述第一深度與所述第二深度之間的差異等于或高于所述預(yù)定閾值，則所述限制裝置控制所述切換裝置來通過不是所述擦除的切換方法來執(zhí)行從所述第一三維視頻到所述第二三維視頻的切換。
6.一種用于編輯三維視頻的圖像處理裝置的圖像處理方法，包括以下步驟通過多種切換方法中的任何一種把要被用作編輯結(jié)果的視頻從第一三維視頻切換到第二三維視頻；測(cè)量三維視頻中的視差以基于測(cè)量到的視差來計(jì)算三維視頻的深度； 把對(duì)所述第一三維視頻計(jì)算的第一深度與對(duì)不同于所述第一三維視頻的所述第二三維視頻計(jì)算的第二深度之間的差異與預(yù)定閾值相比較；以及根據(jù)在所述比較步驟中獲得的比較結(jié)果來限制所述切換步驟的操作。
7.一種用于編輯三維視頻的圖像處理裝置，包括切換裝置，用于通過多種切換方法中的任何一種把要被用作編輯結(jié)果的視頻從第一三維視頻切換到第二三維視頻；視差測(cè)量裝置，用于測(cè)量所述第一三維視頻和所述第二三維視頻之間的視差以基于測(cè)量到的視差來計(jì)算深度；獲取裝置，用于獲取淡變器值，該淡變器值指示出用于將所述第一三維視頻切換到所述第二三維視頻的處理操作的序列的進(jìn)展程度；以及視差調(diào)整裝置，用于根據(jù)所獲取的淡變器值來調(diào)整所述第一三維視頻和所述第二三維視頻的視差；其中，如果擦除被選擇為所述切換方法，則所述切換裝置在所述視差被調(diào)整以使所述第一三維視頻的深度與所述第二三維視頻的深度相匹配的狀態(tài)中通過擦除將所述第一三維視頻切換到所述第二三維視頻。
8.根據(jù)權(quán)利要求7所述的圖像處理裝置，還包括保存裝置，用于保存視差調(diào)整區(qū)間參數(shù)，該視差調(diào)整區(qū)間參數(shù)指示出構(gòu)成所述處理操作的序列的第一調(diào)整區(qū)間、切換區(qū)間和第二調(diào)整區(qū)間之間的分隔，其中所述切換裝置在所述視差被調(diào)整以使所述第一三維視頻的深度與所述第二三維視頻的深度相匹配的狀態(tài)中通過擦除將所述第一三維視頻切換到所述第二三維視頻。
9.根據(jù)權(quán)利要求8所述的圖像處理裝置，其中，響應(yīng)于所獲取的淡變器值的進(jìn)展，所述視差調(diào)整裝置在所述第一調(diào)整區(qū)間中調(diào)整所述第一三維視頻和所述第二三維視頻中至少一個(gè)的視差，以使得所述第一三維視頻的深度和所述第二三維視頻的深度相互匹配，并且在所述第二調(diào)整區(qū)間中調(diào)整所述第二三維視頻的視差以使其返回到其原始值。
10.根據(jù)權(quán)利要求9所述的圖像處理裝置，其中，響應(yīng)于所獲取的淡變器值的進(jìn)展，所述視差調(diào)整裝置在所述第一調(diào)整區(qū)間中調(diào)整所述第一三維視頻和所述第二三維視頻中至少一個(gè)的視差，以使得所述第一三維視頻和所述第二三維視頻的深度的距離中的至少一個(gè)被壓縮以使所述深度的距離相匹配，并且在所述第二調(diào)整區(qū)間中調(diào)整所述第二三維視頻的視差以使其返回到其原始值。
11.根據(jù)權(quán)利要求8所述的圖像處理裝置，其中，如果混合被選擇為所述切換方法，則所述切換裝置在所述視差被調(diào)整以使所述第一三維視頻的深度達(dá)到所述第二三維視頻的深度的狀態(tài)中將所述第一三維視頻切換到所述第二三維視頻。
12.根據(jù)權(quán)利要求8所述的圖像處理裝置，還包括 操作輸入裝置，供用戶控制所述淡變器值。
13.一種用于編輯三維視頻的圖像處理裝置的圖像處理方法，包括以下步驟 測(cè)量第一三維視頻和第二三維視頻之間的視差以基于測(cè)量到的視差來計(jì)算三維視頻的深度；獲取淡變器值，該淡變器值指示出用于將所述第一三維視頻切換到所述第二三維視頻的處理操作的序列的進(jìn)展程度；以及根據(jù)所獲取的淡變器值來調(diào)整所述第一三維視頻和所述第二三維視頻的視差；并且如果擦除被選擇為切換方法，則在所述視差被調(diào)整以使得所述第一三維視頻和所述第二三維視頻的深度相互匹配的狀態(tài)中通過擦除將所述第一三維視頻切換到所述第二三維視頻。
14.一種用于編輯三維視頻的圖像處理裝置，包括切換部件，被配置為通過多種切換方法中的任何一種把要被用作編輯結(jié)果的視頻從第一三維視頻切換到第二三維視頻；視差測(cè)量部件，被配置為測(cè)量三維視頻中的視差以基于測(cè)量到的視差來計(jì)算三維視頻的深度；比較部件，被配置為把對(duì)所述第一三維視頻計(jì)算的第一深度與對(duì)不同于所述第一三維視頻的所述第二三維視頻計(jì)算的第二深度之間的差異與預(yù)定閾值相比較；以及限制部件，被配置為根據(jù)由所述比較部件獲得的比較結(jié)果來限制所述切換部件的操作。
15. 一種用于編輯三維視頻的圖像處理裝置，包括切換部件，被配置為通過多種切換方法中的任何一種把要被用作編輯結(jié)果的視頻從第一三維視頻切換到第二三維視頻；視差測(cè)量部件，被配置為測(cè)量所述第一三維視頻和所述第二三維視頻之間的視差以基于測(cè)量到的視差來計(jì)算深度；獲取部件，被配置為獲取淡變器值，該淡變器值指示出用于將所述第一三維視頻切換到所述第二三維視頻的處理操作的序列的進(jìn)展程度；以及視差調(diào)整部件，被配置為根據(jù)所獲取的淡變器值來調(diào)整所述第一三維視頻和所述第二三維視頻的視差；其中，如果擦除被選擇為所述切換方法，則所述切換部件在所述視差被調(diào)整以使所述第一三維視頻的深度與所述第二三維視頻的深度相匹配的狀態(tài)中通過擦除將所述第一三維視頻切換到所述第二三維視頻。
全文摘要
本發(fā)明提供了圖像處理裝置和圖像處理方法。這里公開了一種用于編輯三維視頻的圖像處理裝置，包括切換部件，被配置為通過多種切換方法中的任何一種把要被用作編輯結(jié)果的視頻從第一三維視頻切換到第二三維視頻；視差測(cè)量部件，被配置為測(cè)量三維視頻中的視差以基于測(cè)量到的視差來計(jì)算三維視頻的深度；比較部件，被配置為把對(duì)第一三維視頻計(jì)算的第一深度與對(duì)不同于第一三維視頻的第二三維視頻計(jì)算的第二深度之間的差異與預(yù)定閾值相比較；以及限制部件，被配置為根據(jù)由比較部件獲得的比較結(jié)果來限制切換部件的操作。
文檔編號(hào)H04N5/268GK102215414SQ20111008444
公開日2011年10月12日 申請(qǐng)日期2011年3月31日 優(yōu)先權(quán)日2010年4月7日
發(fā)明者中村泉三郎, 藤田晉一 申請(qǐng)人:索尼公司