專利名稱:立體視頻時(shí)間幀偏移測(cè)量的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及三維(3D)電視(TV)視頻處理,并且更尤其是涉及立體視頻時(shí)間幀偏移的測(cè)量。
背景技術(shù):
立體三維電視(3DTV)視頻是立體幀對(duì)的序列。每個(gè)幀對(duì)中的幀中的一幀意圖僅由左眼觀看,而另一幀意圖僅由右眼觀看。通過(guò)這種方式,幀對(duì)的雙目視覺連同傳統(tǒng)的圖像高度和寬度一起創(chuàng)建了深度的立體錯(cuò)覺。這些幀對(duì)可以是左眼(L)圖像幀和右眼(R)圖像幀的單獨(dú)的視頻流。通常從3D攝像機(jī)系統(tǒng)取得每個(gè)流,該3D攝像機(jī)系統(tǒng)是具有單獨(dú)的視頻輸出的真實(shí)的兩個(gè)攝像機(jī),從而產(chǎn)生串行數(shù)字雙鏈路。期望的是,兩個(gè)攝像機(jī)被同步,以便同時(shí)捕獲L和R幀對(duì)。這些雙鏈路輸出可作為單獨(dú)的壓縮視頻流被發(fā)送到一個(gè)位置,在該位置,利用若干方法之一來(lái)組合這些圖像對(duì),以產(chǎn)生用于分發(fā)的單個(gè)流??衫脝为?dú)的編碼器/解碼器(CODEC)來(lái)對(duì)每個(gè)流進(jìn)行壓縮,一個(gè)用于L圖像序列,以及一個(gè)用于R圖像序列。然而每個(gè)CODEC通常都具有不確定的幀延遲或者處理等待時(shí)間。結(jié)果,解壓縮的L和R幀的輸出序列可能不再是成對(duì)的、巾貞同步的,即存在時(shí)間錯(cuò)對(duì)準(zhǔn)(miss-alignment)或時(shí)間巾貞偏移的一個(gè)或多個(gè)幀。2004年7月15日對(duì)于Jiuhuai Lu所發(fā)布的,并轉(zhuǎn)讓給俄勒岡州(Oregon)Beaverton的Tektronix公司,并通過(guò)引用結(jié)合于此的美國(guó)專利N0.6751360,描述了一種用于將失真的視頻信號(hào)與對(duì)應(yīng)的源視頻信號(hào)在時(shí)間上進(jìn)行對(duì)準(zhǔn)的快速時(shí)間對(duì)準(zhǔn)估計(jì)方法。為每個(gè)視頻信號(hào)創(chuàng)建時(shí)間信號(hào)曲線(SC),并且使得到的SC與彼此互相關(guān),從而確定兩個(gè)視頻信號(hào)的對(duì)應(yīng)幀之間的匹配。最大的互相關(guān)結(jié)果是對(duì)兩個(gè)視頻信號(hào)的對(duì)應(yīng)幀之間的時(shí)間位移量的指示。然而,如由圖1a的SC圖表所示的,得到的SC具有較大的偏移。較大的偏移不允許根據(jù)SC對(duì)幀偏移進(jìn)行魯棒的(robust)確定,并且對(duì)于在硬件(HW)中的數(shù)字整體實(shí)現(xiàn)要求較大的比特大小。所期望的是一種方法,其在不具有視頻內(nèi)容的任何先驗(yàn)知識(shí)的情況下,測(cè)量幀偏移或者L到R的時(shí)間錯(cuò)對(duì)準(zhǔn),該測(cè)量提供了對(duì)L和R圖像序列之間的任何不準(zhǔn)確的時(shí)間幀偏移的魯棒提示。
發(fā)明內(nèi)容
由此,本發(fā)明提供了一種立體視頻時(shí)間幀偏移測(cè)量技術(shù),該技術(shù)是魯棒的,并且不需要視頻內(nèi)容的任何先驗(yàn)知識(shí)。該立體視頻時(shí)間幀偏移測(cè)量系統(tǒng)使用改進(jìn)的特征曲線生成器來(lái)為立體視頻信號(hào)的左和右圖像序列中的每個(gè)生成魯棒的特征曲線。得到的特征曲線在指定的相關(guān)范圍上被互相關(guān),以生成互相關(guān)系數(shù)。將互相關(guān)系數(shù)與高閾值進(jìn)行比較,并且為超過(guò)該高閾值的每個(gè)互相關(guān)系數(shù)生成并顯示時(shí)間幀偏移。每個(gè)新的、可靠的時(shí)間幀偏移結(jié)果在被顯示時(shí)被加亮,否則以背景方式顯示最后的結(jié)果。
當(dāng)結(jié)合所附權(quán)利要求和所附的附圖進(jìn)行閱讀時(shí),本發(fā)明的目的、優(yōu)點(diǎn)和其他新穎的特征根據(jù)以下的詳細(xì)描述而是顯而易見的。
圖1提供了根據(jù)本發(fā)明的用于測(cè)量立體視頻時(shí)間幀偏移的改進(jìn)的特征曲線生成器的框圖視圖。圖2提供了根據(jù)本發(fā)明的用于立體視圖時(shí)間幀偏移測(cè)量的系統(tǒng)的框圖視圖。圖3提供了根據(jù)本發(fā)明的具有降低的硬件要求的特征曲線生成器的框圖視圖。圖4提供了根據(jù)本發(fā)明的用于進(jìn)一步降低硬件要求的輸入濾波器的框圖視圖。
具體實(shí)施例方式現(xiàn)在參考圖1,亮度圖像序列Yf (η)被輸入到時(shí)間特征曲線(Cf)生成器10,以產(chǎn)生如上面提到的美國(guó)專利N0.6752360中描述的幀到幀互協(xié)方差輸出。該亮度序列被輸入到高通濾波器(HPF) 12,以產(chǎn)生高通濾波后的亮度圖像序列Yhf (η),其轉(zhuǎn)而被輸入到幀/場(chǎng)延遲電路14,該幀/場(chǎng)延遲電路14提供被延遲一個(gè)幀/場(chǎng)的亮度圖像的輸出序列Ytv1 (η)。兩個(gè)得到的亮度圖像序列被輸入到乘法累加電路16,其實(shí)現(xiàn)未歸一化的互相關(guān),也稱為協(xié)方差測(cè)量,以根據(jù)現(xiàn)有技術(shù)產(chǎn)生SC、Cf,并且其用圖表表示為圖la。如先前所述的,在這一點(diǎn)上,SC具有大的偏移使得變化不是容易地可辨別的。因此,SC進(jìn)一步由差分器18所處理,該差分器18提供巾貞到巾貞互相關(guān)Cf的歸一化的先過(guò)差(first-past difference)Cdf,在圖1b中示出了其圖表。出于比較的目的,如圖1b中所示的,由幀的數(shù)目N來(lái)對(duì)Cdf進(jìn)行歸一化。通過(guò)比較圖1a和Ib的兩個(gè)圖表,顯然的是,現(xiàn)在的變化是容易顯而易見的,S卩,SC的動(dòng)態(tài)范圍被顯著減小,并且AC內(nèi)容被增加?,F(xiàn)在參考圖2,使用圖1的改進(jìn)的SC生成器,立體圖像對(duì)的亮度分量像素YLf (η)和YRf (η)被應(yīng)用到雙SC生成器20,以產(chǎn)生先過(guò)差CLdf和CRdf。然后幀/場(chǎng)延遲14的輸入和輸出幀/場(chǎng)的每個(gè)像素(由η索引),在不被歸一化到個(gè)別標(biāo)準(zhǔn)偏差的情況下,由乘法累加電路16進(jìn)行互相關(guān),以產(chǎn)生由f索引的每個(gè)輸入幀和由f_l索引的先前幀的幀差異的協(xié)方差測(cè)量。這在左和右輸入幀序列上被單獨(dú)完成,YLf (η)在左序列幀/場(chǎng)延遲14L和乘法累加電路16L中被完成,以及YRf (η)在右序列幀/場(chǎng)延遲14R和乘法累加電路16R中被完成。來(lái)自左乘法累加電路16L的用于由f索引的每個(gè)左幀的得到的協(xié)方差值接著被差分器18L所差分,以產(chǎn)生特征曲線值CLdf。同樣,來(lái)自右乘法累加電路16R的用于由f索引的每個(gè)右?guī)牡玫降膮f(xié)方差值被差分器18R所差分,以產(chǎn)生特征曲線值CLdf。該特征曲線過(guò)程優(yōu)選在硬件中被實(shí)現(xiàn)以允許進(jìn)行實(shí)時(shí)處理。在圖2中示出的圖表中重疊示出了 L和R圖像序列的改進(jìn)的時(shí)間信號(hào)曲線,其作為在序列幀率下的離散值。如在作為示例的情況中所指示的,在幀12處,右信道跳過(guò)一幀,因此特征曲線是不同步的,即,在該幀跳過(guò)之后,在兩個(gè)通道之間存在一幀的偏移。相應(yīng)的先過(guò)差被輸入到具有等于指定的相關(guān)范圍R的兩倍的長(zhǎng)度的相應(yīng)的先入/先出(FIFO)緩沖器22L、22R。來(lái)自FIFO緩沖器22的輸出可用于典型的微處理器和存儲(chǔ)器系統(tǒng)24。該微處理器和存儲(chǔ)器系統(tǒng)24計(jì)算滑動(dòng)相關(guān),如圖2中所說(shuō)明的。在已經(jīng)獲取幀率采樣的足夠記錄后,該微處理器24從實(shí)時(shí)幀處理硬件內(nèi)的FIFO緩沖器22讀取CLd和CRd的過(guò)往采樣。如以上所指示的,記錄長(zhǎng)度為2xR,其中如圖2的等式中所示的,R為相關(guān)計(jì)算范圍和偏移檢測(cè)范圍。相應(yīng)的CLd和CRd的相關(guān)范圍R上的均方根(rms)被用于所示等式的分母中,以創(chuàng)建從-1到+1的范圍變動(dòng)的歸一化的相關(guān)系數(shù)。因此,存在的可能性是,在給定計(jì)算范圍R內(nèi),所有幀為靜止幀,即,是相同的,使得特征曲線的該段的rms值接近于O。為避免這種情況,微處理器24將rms值針對(duì)最小值進(jìn)行測(cè)試,并且無(wú)視r(shí)ms值小于該最小值的相關(guān)范圍R上的幀集合。圖2中示出的等式為若干個(gè)幀偏移s在范圍R上計(jì)算了相關(guān)系數(shù)Xdc (s,f),以確定兩條特征曲線CLd(f)和CRd(f)之間最好的偏移估計(jì)。在所示的示例中,偏移s的范圍為從-3到+4幀,并且相關(guān)范圍R為8。然而可以使用更長(zhǎng)的相關(guān)范圍(>8)來(lái)在Xdc (S,f)的計(jì)算中得到更多的精確度。而且,在相關(guān)之前,可以使用CLd(f)和CRd(f)的內(nèi)插或采樣上變換的常見方法,來(lái)實(shí)現(xiàn)對(duì)于幀/場(chǎng)時(shí)間的片段的更高的時(shí)間分辨率。對(duì)用于每個(gè)偏移s的Xdc的值進(jìn)行測(cè)試,以發(fā)現(xiàn)其是否在一定的閾值以上,典型地,在0.98以上。如果Xdc的值在該閾值以上,那么就已經(jīng)找到了 L到R幀偏移的可靠指示,并且將對(duì)應(yīng)的偏移s的值在儀器顯示屏幕26上進(jìn)行顯示。在給定的示例中,LR幀偏移的值為+1,該值被顯示。對(duì)于每個(gè)計(jì)算出的LR幀偏移,如果發(fā)現(xiàn)其是可靠的,則得到的偏移s被加亮,以指示更新已經(jīng)發(fā)生。如果讀出沒(méi)有被更新,那么以灰色或者以其他方式不加亮來(lái)示出所顯示的讀出,從而指示在沒(méi)有有最近更新的情況下示出了最后的良好值。每當(dāng)新的幀f被添加到FIFO緩沖器22,最舊的值被丟棄,并重復(fù)Xdc (s,f)的計(jì)算,并且如果發(fā)現(xiàn)值在該閾值以上,則利用該可靠值再次更新讀出,并在顯示器26上加亮該讀出。還優(yōu)選的是,用圖表表示隨時(shí)間的得到的更新幀偏移S,從而在長(zhǎng)時(shí)期上創(chuàng)建L到R圖像序列時(shí)間偏移的記錄。這允許了在不可接受的長(zhǎng)時(shí)期內(nèi),對(duì)時(shí)間錯(cuò)對(duì)準(zhǔn)超過(guò)預(yù)定的閾值的間隔進(jìn)行加時(shí)間戳或進(jìn)行警告。盡管硬件實(shí)現(xiàn)方式是優(yōu)選的,但整個(gè)過(guò)程可以在軟件(SW)中被實(shí)現(xiàn)和測(cè)試。盡管可以使用其他值,但根據(jù)這種測(cè)試,所示示例的閾值和相關(guān)范圍被確定。為降低所需的服,如圖3中所說(shuō)明的,可對(duì)來(lái)自L和R圖像序列的YL(n)和YR(n)像素抽取(decimate)兩個(gè),并交織成單個(gè)采樣流。來(lái)自相應(yīng)圖像序列的像素被輸入到低通濾波器中的相應(yīng)的低通濾波器(LPF)32L、32R,以及被輸入到是輸入濾波器電路28的一部分的交織電路30。來(lái)自相應(yīng)的LPF32的輸出被輸入到相應(yīng)的抽取器(decimator)34L、34R,其中延遲電路36將來(lái)自抽取器的輸出之一延遲一個(gè)像素間隔。來(lái)自未延遲的抽取器34R和延遲電路36的輸出被輸入到復(fù)用器38,以產(chǎn)生具有交織的L和R圖像序列像素的單個(gè)像素流。得到的單個(gè)像素流接著被輸入到高通濾波器(HPF) 12’,以在輸入到幀/場(chǎng)延遲14之前去除DC或者亮度均值分量。來(lái)自幀/場(chǎng)延遲14的輸入和輸出被輸入到修改的乘法累加電路16’,以實(shí)現(xiàn)互相關(guān),產(chǎn)生相應(yīng)的CLf和CRf流,該CLf和CRf流被輸入到相應(yīng)的差分器18,以產(chǎn)生與圖2中所示的相同的SC輸出。單個(gè)乘法累加電路16’現(xiàn)在實(shí)際上是互協(xié)方差檢測(cè)器,因?yàn)樵摻Y(jié)果沒(méi)有被幀rms值所歸一化。 由于圖3中的交織,針對(duì)時(shí)間上相鄰的幀或場(chǎng)之間的互協(xié)方差,單獨(dú)HPF濾波的L和R亮度像素被獨(dú)立地累積,接著被差分和歸一化成期望的SC值,以用于輸入到圖2中所示的微處理器24。
如圖4中所示,可以通過(guò)將LPF、交織和HPF濾波30、12’進(jìn)行組合,來(lái)完成對(duì)HW的進(jìn)一步簡(jiǎn)化。LPF32和HPF12’的脈沖響應(yīng)可以被組合或卷積成單個(gè)脈沖響應(yīng)。該結(jié)果接著可以被分解到兩相實(shí)現(xiàn)和選擇復(fù)用器中,為每個(gè)亮度分量YL(n)和YR(η)創(chuàng)建期望的總體水平頻率響應(yīng)。該輸出是具有組合的LPF和HPF水平頻率響應(yīng)的交織和抽取的亮度值,其接著被輸入到單個(gè)幀/場(chǎng)延遲14。圖4的上部示出了組合的多相交織器有限脈沖響應(yīng)(FIR)濾波器40的詳細(xì)框圖,而底部視圖示出了如何在組合的多相交織器FIR濾波器中,將卷積的LPF和HPF脈沖響應(yīng)分解到單獨(dú)的、簡(jiǎn)化的處理路徑中。因此,本發(fā)明提供了一種立體視頻時(shí)間幀偏移測(cè)量系統(tǒng),其使用改進(jìn)的特征曲線生成器來(lái)為左和右圖像序列產(chǎn)生特征曲線,該特征曲線接著與彼此相關(guān),以確定兩個(gè)圖像序列之間的時(shí)間幀偏移。
權(quán)利要求
1.一種用于在立體視頻時(shí)間幀偏移測(cè)量系統(tǒng)中使用的改進(jìn)的特征曲線生成器,所述改進(jìn)的特征曲線生成器具有的類型具有輸入高通濾波器,其用于接收輸入圖像序列,以產(chǎn)生濾波的圖像序列,所述類型具有幀/場(chǎng)延遲,其用于將濾波的圖像序列延遲指定數(shù)量的幀/場(chǎng),以產(chǎn)生延遲的圖像序列,以及所述類型具有互相關(guān)器,其用于從所述濾波的圖像序列和所述延遲的圖像序列生成用于輸入圖像序列的特征曲線,其中所述改進(jìn)包括: 差分器電路,其具有作為輸入的所述特征曲線,并提供作為輸出的改進(jìn)的特征曲線,所述改進(jìn)的特征曲線增加了 AC內(nèi)容,同時(shí)降低了特征曲線的所需的動(dòng)態(tài)范圍。
2.—種立體視頻時(shí)間幀偏移測(cè)量系統(tǒng),包括: 特征生成器,其具有作為輸入的表示立體視頻信號(hào)的左圖像序列和右圖像序列,并且為左圖像序列和右圖像序列中的每個(gè)提供作為輸出的特征曲線;以及 裝置,用于為左和右圖像序列將特征曲線進(jìn)行互相關(guān),以確定左和右圖像序列之間的時(shí)間幀偏移。
3.如權(quán)利要求2中所述的測(cè)量系統(tǒng),進(jìn)一步包括裝置,其用于顯示時(shí)間幀偏移,每當(dāng)互相關(guān)裝置更新時(shí)間幀偏移時(shí)對(duì)時(shí)間幀偏移進(jìn)行加亮,而在此類更新之間保持時(shí)間幀偏移的最新值。
4.如權(quán)利要求2中所述的測(cè)量系統(tǒng),其中所述特征生成器包括: 裝置,用于將左和右圖像序列中的 每個(gè)的序列幀/場(chǎng)進(jìn)行互相關(guān),以產(chǎn)生相應(yīng)的互相關(guān)系數(shù);以及 裝置,用于在左和右圖像序列中的每個(gè)內(nèi)對(duì)序列互相關(guān)系數(shù)進(jìn)行差分,以產(chǎn)生用于左和右圖像序列中的每個(gè)的序列互相關(guān)系數(shù)之間的歸一化的先過(guò)差,作為用于左和右圖像序列的相應(yīng)的特征曲線。
5.如權(quán)利要求2中所述的測(cè)量系統(tǒng),其中該特征曲線互相關(guān)裝置包括: 用于特征曲線中的每個(gè)的先入先出緩沖器,所述先入先出緩沖器具有作為輸入的特征曲線,并具有輸出;以及 微處理器系統(tǒng),其具有作為輸入的來(lái)自所述先入先出緩沖器的輸出,并且提供作為輸出的時(shí)間幀偏移,所述微處理器系統(tǒng)在所述輸入之間執(zhí)行滑動(dòng)互相關(guān),以產(chǎn)生時(shí)間幀偏移。
6.如權(quán)利要求2中所述的測(cè)量系統(tǒng),其中所述特征生成器包括: 裝置,用于對(duì)左和右圖像序列中的每個(gè)進(jìn)行低通濾波,以產(chǎn)生相應(yīng)的低通濾波的圖像序列; 裝置,用于對(duì)低通濾波的圖像序列進(jìn)行交織,以產(chǎn)生表示左和右圖像序列的單個(gè)數(shù)據(jù)流; 裝置,用于對(duì)所述單個(gè)數(shù)據(jù)流進(jìn)行高通濾波,以產(chǎn)生濾波的單個(gè)數(shù)據(jù)流;以及裝置,用于對(duì)濾波的單個(gè)數(shù)據(jù)流內(nèi)的左和右圖像分量進(jìn)行互相關(guān),以產(chǎn)生相應(yīng)的特征曲線,以用于輸入到特征曲線互相關(guān)裝置。
7.如權(quán)利要求2中所述的測(cè)量系統(tǒng),其中所述特征生成器包括: 組合的多相交織器有限脈沖響應(yīng)濾波器,其與低通濾波器、交織器和高通濾波器相對(duì)應(yīng),所述組合的多相交織器有限脈沖響應(yīng)濾波器具有作為輸入的左和右圖像序列,并且具有作為輸出的單個(gè)數(shù)據(jù)流;以及 裝置,用于將來(lái)自所述單個(gè)數(shù)據(jù)流的左和右圖像分量進(jìn)行互相關(guān),以產(chǎn)生相應(yīng)的特征曲線,以用于輸入到所述微處理器系統(tǒng)。
8.一種測(cè)量立體視頻時(shí)間幀偏移的方法,包括以下步驟: 從左圖像序列生成魯棒的左特征曲線; 從右圖像序列生成魯棒的右特征曲線,所述左和右圖像序列形成立體視頻序列;以及 將左和右魯棒特征曲線進(jìn)行互相關(guān),以確定所述左和右圖像序列之間的時(shí)間巾貞偏移。
9.如權(quán)利要求8中所述的方法,其中所述生成步驟均包括以下步驟: 將每個(gè)圖像序列延遲指定數(shù)量的幀/場(chǎng),以產(chǎn)生相應(yīng)的延遲圖像序列; 將每個(gè)圖像序列與其對(duì)應(yīng)的延遲圖像序列進(jìn)行互相關(guān),以產(chǎn)生相應(yīng)的初始特征曲線;以及 將每個(gè)初始特征曲線 進(jìn)行差分,以產(chǎn)生相應(yīng)的歸一化的先過(guò)差,作為相應(yīng)的左和右魯棒特征曲線。
10.如權(quán)利要求8中所述的方法,進(jìn)一步包括在顯示設(shè)備上顯示所述時(shí)間幀偏移的步驟。
11.如權(quán)利要求10中所述的方法,其中,所述顯示步驟包括以下步驟:每當(dāng)更新來(lái)自互相關(guān)步驟的時(shí)間幀偏移時(shí),在顯示設(shè)備上加亮所述時(shí)間幀偏移,而在更新之間,在顯示設(shè)備上以背景模式顯示先前的時(shí)間幀偏移。
12.如權(quán)利要求8中所述的方法,其中所述互相關(guān)裝置包括在魯棒的左和右特征曲線的指定范圍上進(jìn)行滑動(dòng)互相關(guān)。
13.一種立體視頻時(shí)間幀偏移測(cè)量系統(tǒng),包括: 時(shí)間特征曲線生成器,其具有作為輸入的左圖像序列和右圖像序列,所述左和右圖像序列表示用于立體視頻信號(hào)的幀/場(chǎng)對(duì),并且具有作為輸出的左特征曲線和右特征曲線,每個(gè)特征曲線是互相關(guān)系數(shù)值的序列,所述互相關(guān)系數(shù)值表示從幀/場(chǎng)到幀/場(chǎng)的歸一化的先過(guò)差;以及 處理系統(tǒng),其具有作為輸入的所述左和右特征曲線,并且提供作為輸出的時(shí)間幀偏移值,所述時(shí)間幀偏移值表示所述左和右圖像序列的幀/場(chǎng)對(duì)之間的時(shí)間差。
14.如權(quán)利要求13中所述的測(cè)量系統(tǒng),其中所述時(shí)間特征曲線生成器包括一對(duì)特征曲線生成器,每個(gè)用于左和右圖像序列中的每個(gè),每個(gè)特征曲線生成器具有幀/場(chǎng)延遲,所述圖像序列被輸入到所述幀/場(chǎng)延遲,以產(chǎn)生延遲圖像序列,所述每個(gè)特征曲線生成器具有乘法累加器,所述乘法累加器具有作為輸入的圖像序列和延遲圖像序列,以及作為輸出的互相關(guān)系數(shù)的初始序列,以及所述每個(gè)特征曲線生成器具有差分器,所述差分器具有作為輸入的所述互相關(guān)系數(shù)的初始序列,以及作為輸出的特征曲線。
15.如權(quán)利要求13中所述的測(cè)量系統(tǒng),其中所述處理系統(tǒng)包括: 一對(duì)先入/先出(FIFO)緩沖器,每個(gè)用于左和右特征曲線中的每個(gè),每個(gè)FIFO緩沖器具有作為輸入的特征曲線并且具有輸出,所述特征曲線具有足夠用于一次存儲(chǔ)特征曲線的段的長(zhǎng)度;以及 處理器,其具有作為輸入的來(lái)自FIFO緩沖器的輸出,所述處理器在FIFO緩沖器的輸出之間提供滑動(dòng)互相關(guān),以產(chǎn)生多個(gè)相關(guān)結(jié)果,并產(chǎn)生作為輸出的與超過(guò)指定的高閾值的相關(guān)結(jié)果相對(duì)應(yīng)的時(shí)間幀偏移值。
16.如權(quán)利要求13中所述的測(cè)量系統(tǒng),進(jìn)一步包括顯示器,其具有作為輸入的來(lái)自所述處理系統(tǒng)的時(shí)間巾貞偏移值。
17.如權(quán)利要求16中所述的測(cè)量系統(tǒng),其中,當(dāng)由所述處理系統(tǒng)更新所述時(shí)間幀偏移值時(shí),在顯示器上加亮所述時(shí)間幀偏移值,并且否則在顯示器上以背景方式顯示所述時(shí)間幀偏移值。
18.如權(quán)利要求13中所述的測(cè)量系統(tǒng),其中所述時(shí)間特征曲線生成器包括: 濾波器/交織器,其具有作為輸入的左和右圖像序列,以及具有作為輸出的交織圖像序列流; 幀/場(chǎng)延遲,其具有作為輸入的所述交織圖像序列流,以及具有作為輸出的延遲交織圖像序列流; 修改的乘法累加器,其具有作為輸入的所述交織圖像序列流和所述延遲交織圖像序列流,以及作為輸出的初始的左和右互相關(guān)系數(shù);以及 一對(duì)差分器,一個(gè)差分器具有作為輸入的左互相關(guān)系數(shù)和作為輸出的左特征曲線,以及另一個(gè)差分器具有作為輸入的右互相關(guān)系數(shù)和作為輸出的右特征曲線。
19.如權(quán)利要求18中所述的測(cè)量系統(tǒng),其中所述濾波器/交織器包括: 單獨(dú)的低通濾波器,一個(gè)低通濾波器用于對(duì)左圖像序列進(jìn)行濾波,以及另一個(gè)低通濾波器用于對(duì)右圖像序 列進(jìn)行濾波,以用于產(chǎn)生左和右濾波圖像序列; 裝置,用于對(duì)左和右濾波圖像序列進(jìn)行交織,以形成單個(gè)數(shù)據(jù)流;以及 高通濾波器,用于對(duì)所述單個(gè)數(shù)據(jù)流進(jìn)行濾波,以產(chǎn)生交織圖像序列流。
20.如權(quán)利要求18中所述的測(cè)量系統(tǒng),其中所述濾波器/交織器包括多相交織器有限脈沖響應(yīng)(FIR)濾波器,其具有作為輸入的左和右圖像序列,以及具有作為輸出的交織圖像序列流,以用于輸入到所述幀/場(chǎng)延遲。
全文摘要
一種立體視頻時(shí)間幀偏移測(cè)量系統(tǒng),其使用改進(jìn)的特征曲線生成器來(lái)生成用于立體視頻信號(hào)的左和右圖像序列中的每個(gè)的魯棒的特征曲線。得到的特征曲線在指定的相關(guān)范圍上被互相關(guān),以生成互相關(guān)系數(shù)。將所述互相關(guān)系數(shù)與高閾值進(jìn)行比較,并且為超過(guò)該高閾值的每個(gè)互相關(guān)系數(shù)生成和顯示時(shí)間幀偏移。每個(gè)新的時(shí)間幀偏移結(jié)果在被顯示時(shí)被加亮,否則以背景方式顯示最后的結(jié)果。
文檔編號(hào)H04N13/00GK103139596SQ20121059632
公開日2013年6月5日 申請(qǐng)日期2012年12月5日 優(yōu)先權(quán)日2011年12月5日
發(fā)明者D·G·貝克 申請(qǐng)人:特克特朗尼克公司