專(zhuān)利名稱(chēng)：消除信號(hào)路徑中的時(shí)間延遲的制作方法
技術(shù)領(lǐng)域：
本發(fā)明一般地涉及信號(hào)處理。
背景技術(shù)：
多聲道音頻譯碼(通常稱(chēng)為空間音頻譯碼)將多聲道音頻信號(hào)的空間圖像轉(zhuǎn)義 記錄成一個(gè)壓縮的空間參數(shù)集，該空間參數(shù)集可用于從發(fā)送的聲道縮減混音信號(hào)合 成高質(zhì)量多聲道呈現(xiàn)。
在支持若干譯碼方案的多聲道音頻系統(tǒng)中， 一個(gè)聲道縮減混音信號(hào)可能由于 信號(hào)處理(例如，時(shí)域至頻域的變換)而相對(duì)于其它聲道縮減混音信號(hào)和/或相應(yīng)的空 間參數(shù)產(chǎn)生延遲。

發(fā)明內(nèi)容
本發(fā)明的目的可通過(guò)提供一種處理音頻信號(hào)的方法來(lái)實(shí)現(xiàn)，該方法包括接 收包括聲道縮減混音信號(hào)和空間信息、并依照第一聲道縮減混音解碼方案和第二聲 道縮減混音解碼方案編碼的音頻信號(hào)；根據(jù)所述第一聲道縮減混音解碼方案處理所 述聲道縮減混音信號(hào)；以及延遲所述經(jīng)處理的聲道縮減混音信號(hào)。
附圖簡(jiǎn)述
包括于此以提供對(duì)本發(fā)明的進(jìn)一步理解、并被結(jié)合在本申請(qǐng)中且構(gòu)成其一部 分的附圖示出本發(fā)明的實(shí)施方式，其與說(shuō)明書(shū)一起可用來(lái)解釋本發(fā)明的原理。在附 圖中


圖1至3分別是根據(jù)本發(fā)明的實(shí)施例解碼音頻信號(hào)的裝置的框圖； 圖4是用于解釋信號(hào)處理方法的圖1中所示的多聲道解碼單元的框圖； 圖5是用于解釋信號(hào)處理方法的圖2中所示的多聲道解碼單元的框圖； 圖6至10是根據(jù)本發(fā)明的另一個(gè)實(shí)施例用于解碼音頻信號(hào)的方法的框圖。本發(fā)明的最佳實(shí)施方式
下面將詳細(xì)參考本發(fā)明的較佳實(shí)施方式，其具體示例圖示于附圖中。只要有 可能，即在所有附圖中始終使用相同的附圖標(biāo)記表示相同或相似的部件。
因?yàn)橐纛l信號(hào)的信號(hào)處理在若干個(gè)域中一尤其是在時(shí)域中是可能的，所以需 要通過(guò)考慮時(shí)間對(duì)準(zhǔn)來(lái)適當(dāng)?shù)靥幚硪纛l信號(hào)。
因此，在音頻信號(hào)處理中，可變換音頻信號(hào)的域。音頻信號(hào)域的變換可包括
時(shí)間/頻率(T/F)域變換和復(fù)數(shù)域變換。T/F域變換包括時(shí)域信號(hào)至頻域信號(hào)的變換 和頻域信號(hào)至?xí)r域信號(hào)的變換中的至少一種。復(fù)數(shù)域變換是指根據(jù)音頻信號(hào)處理操 作的復(fù)數(shù)性進(jìn)行的域變換。同樣，復(fù)數(shù)域變換包括在實(shí)頻域中的信號(hào)變換至在復(fù)頻 域中的信號(hào)，在復(fù)頻域中的信號(hào)變換至在實(shí)頻域中的信號(hào)等。處理音頻信號(hào)時(shí)如果 不考慮時(shí)間對(duì)準(zhǔn)，則音頻質(zhì)量可能劣化。為了對(duì)準(zhǔn)可進(jìn)行延遲處理。延遲處理可包 括編碼延遲和解碼延遲中的至少一個(gè)。編碼延遲是指將信號(hào)按由于信號(hào)編碼所產(chǎn)生 的延遲進(jìn)行延遲。解碼延遲是指在信號(hào)解碼期間引入的實(shí)時(shí)延遲。
在解釋本發(fā)明之前，先將本發(fā)明的說(shuō)明書(shū)中使用的術(shù)語(yǔ)定義如下。
'聲道縮減混音輸入域'是指可在生成多聲道音頻信號(hào)的多聲道解碼單元中 接收的聲道縮減混音信號(hào)的域。
'殘差輸入域'是指可在多聲道解碼單元中接收的殘差信號(hào)的域。
'時(shí)序數(shù)據(jù)'是指需要與多聲道音頻信號(hào)時(shí)間同步或時(shí)間對(duì)準(zhǔn)的數(shù)據(jù)。'時(shí) 序數(shù)據(jù)'的例子包括用于運(yùn)動(dòng)畫(huà)面、靜止圖像、文本等的數(shù)據(jù)。
'超前'是指使信號(hào)提前一特定時(shí)間的過(guò)程。
'滯后'是指使信號(hào)延遲一特定時(shí)間的過(guò)程。
'空間信息'是指用于合成多聲道音頻信號(hào)的信息?？臻g信息可以是空間參 數(shù)，包括但不限于指示兩聲道之間的能量差的聲道電平差(CLD)、指示兩個(gè)不同 聲道之間相關(guān)性的聲道間相干性(ICC)、作為用于從兩個(gè)聲道生成三個(gè)聲道的預(yù)測(cè) 系數(shù)的聲道預(yù)測(cè)系數(shù)(CPC)等。
本文所述的音頻信號(hào)解碼是可得益于本發(fā)明的信號(hào)處理的一個(gè)例子。本發(fā)明 還可應(yīng)用于其它類(lèi)型的信號(hào)處理(例如，視頻信號(hào)處理)?？尚薷谋疚乃龅膶?shí)施例， 以包括任何數(shù)量的可用任何類(lèi)型的域表示的信號(hào)，這些域包括但不限于時(shí)間、正交 鏡像濾波器(QMF)、修正離散余弦變換(MDCT)、復(fù)數(shù)等。
根據(jù)本發(fā)明的一個(gè)實(shí)施例處理音頻信號(hào)的方法包括通過(guò)將聲道縮減混音信號(hào) 和空間信息組合生成多聲道音頻信號(hào)?？纱嬖谟糜诒硎韭暤揽s減混音信號(hào)的多個(gè)域
6(例如，時(shí)域、QMF、 MDCT)。因?yàn)橛蛑g的變換可能會(huì)在聲道縮減混音信號(hào)的信 號(hào)路徑中引入時(shí)延，所以需要補(bǔ)償聲道縮減混音信號(hào)和對(duì)應(yīng)于該聲道縮減混音信號(hào) 的空間信息之間的時(shí)間同步差的步驟。補(bǔ)償時(shí)間同步差的過(guò)程可包括延遲聲道縮減 混音信號(hào)和空間信息中的至少一個(gè)。現(xiàn)在將參考附圖描述補(bǔ)償兩個(gè)信號(hào)之間和/或 信號(hào)與參數(shù)之間的時(shí)間同步差的幾個(gè)實(shí)施例。
本文中對(duì)'裝置'的引用不應(yīng)理解為將所述的實(shí)施例局限于硬件。本文所述 的實(shí)施例可實(shí)現(xiàn)為硬件、軟件、固件或其任意組合。
本文所述的實(shí)施例可實(shí)現(xiàn)為計(jì)算機(jī)可讀介質(zhì)上的指令，所述指令在被處理器 (例如，計(jì)算機(jī)處理器)執(zhí)行時(shí)使得處理器執(zhí)行提供本文所述的本發(fā)明的各方面的操 作。術(shù)語(yǔ)'計(jì)算機(jī)可讀介質(zhì)'指的是參與將指令提供給處理器供其執(zhí)行的任何介質(zhì)， 包括但不限于非易失性介質(zhì)(例如，光盤(pán)或磁盤(pán))、易失性介質(zhì)(例如，存儲(chǔ)器)和傳 輸介質(zhì)。傳輸介質(zhì)包括但不限于同軸電纜、銅線、光纖。傳輸介質(zhì)還可采用聲、光 或射頻波的形式。
圖1是根據(jù)本發(fā)明的一個(gè)實(shí)施例用于解碼音頻信號(hào)的裝置的圖示。
參考圖1，根據(jù)本發(fā)明的一個(gè)實(shí)施例用于解碼音頻信號(hào)的裝置包括聲道縮減混 音解碼單元100和多聲道解碼單元200。
聲道縮減混音單元100包括域變換單元110。在所示的例子中，聲道縮減混音 解碼單元100將在QMF域中處理的聲道縮減混音信號(hào)XQ1發(fā)送到多聲道解碼單 元200而不進(jìn)一步處理。聲道縮減混音解碼單元100還將時(shí)域聲道縮減混音信號(hào) XT1發(fā)送到多聲道解碼單元200，時(shí)域聲道縮減混音信號(hào)XT1是利用變換單元110 將聲道縮減混音信號(hào)XQ1從QMF域變換到時(shí)域來(lái)生成的。將音頻信號(hào)從QFM域 變換到時(shí)域的技術(shù)是公知的，并已被納入公眾可獲得的音頻信號(hào)處理標(biāo)準(zhǔn)(例如， MPEG沖。
多聲道解碼單元200利用聲道縮減混音信號(hào)XT1或XQ1以及空間信息SI1或 SI2生成多聲道音頻信號(hào)XM1。
圖2是根據(jù)本發(fā)明的另一個(gè)實(shí)施例用于解碼音頻信號(hào)的裝置的圖示。
參考圖2，根據(jù)本發(fā)明的另一個(gè)實(shí)施例用于解碼音頻信號(hào)的裝置包括聲道縮減 混音解碼單元lOOa、多聲道解碼單元200a和域變換單元300a。
聲道縮減混音解碼單元100a包括域變換單元110a。在所示的例子中，聲道縮 減混音解碼單元100a輸出在MDCT域中處理的聲道縮減混音信號(hào)Xm。聲道縮減 混音解碼單元100a還輸出在時(shí)域中的聲道縮減混音信號(hào)XT2，聲道縮減混音信號(hào)XT2是利用變換單元110a將Xm從MDCT域變換到時(shí)域來(lái)生成的。
在時(shí)域中的聲道縮減混音信號(hào)XT2被發(fā)送到多聲道解碼單元200a。在MDCT 域中的聲道縮減混音信號(hào)Xm穿過(guò)域變換單元300a，在其中它變換成在QMF域中 的聲道縮減混音信號(hào)XQ2。經(jīng)變換的聲道縮減混音信號(hào)XQ2然后被發(fā)送到多聲道 解碼單元200a。
多聲道解碼單元200a利用發(fā)送的聲道縮減混音信號(hào)XT2或XQ2以及空間信 息SI3或SI4生成多聲道音頻信號(hào)XM2。
圖3是根據(jù)本發(fā)明的另一個(gè)實(shí)施例解碼音頻信號(hào)的裝置的圖示。
參考圖3，根據(jù)本發(fā)明的另一個(gè)實(shí)施例用于解碼音頻信號(hào)的裝置包括聲道縮減 混音解碼單元100b、多聲道解碼單元200b、殘差解碼單元400b和域變換單元500b。
聲道縮減混音解碼單元100b包括域變換單元110b。聲道縮減混音解碼單元 100b將在QMF域中處理的聲道縮減混音信號(hào)XQ3發(fā)送到多聲道解碼單元200b而 不進(jìn)一步處理。聲道縮減混音解碼單元100b還將聲道縮減混音信號(hào)XT3發(fā)送到多 聲道解碼單元200b，聲道縮減混音信號(hào)XT3是利用變換單元110b將聲道縮減混 音信號(hào)XQ3從QMF域變換到時(shí)域來(lái)生成的。
在某些實(shí)施例中，經(jīng)編碼的殘差信號(hào)RB被輸入到殘差解碼單元400b然后處 理。在這種情形中，經(jīng)處理的殘差信號(hào)RM是在MDCT域中的信號(hào)。殘差信號(hào)可 以是例如音頻譯碼應(yīng)用(例如，MPEG)中普遍使用的預(yù)測(cè)誤差信號(hào)。
隨后，在MDCT域中的殘差信號(hào)RM通過(guò)域變換單元500b變換成在QMF域 中的殘差信號(hào)RQ，然后發(fā)送到多聲道解碼單元200b。
如果在殘差解碼單元400b中處理并輸出的殘差信號(hào)的域是殘差輸入域，則可 將處理的參數(shù)信號(hào)發(fā)送到多聲道解碼單元200b，而不經(jīng)歷域變換過(guò)程。
圖3示出在某些實(shí)施例中域變換單元500b將在MDCT域中的殘差信號(hào)RM 變換成在QMF域中的殘差信號(hào)RQ。具體地，域變換單元500b被構(gòu)造成將從殘差 解碼單元400b輸出的殘差信號(hào)RM變換成在QMF域中的殘差信號(hào)RQ。
如上所述，可能存在可導(dǎo)致需要進(jìn)行補(bǔ)償?shù)穆暤揽s減混音信號(hào)和空間信息之 間的時(shí)間同步差的多個(gè)聲道縮減混音信號(hào)域。以下描述用于補(bǔ)償時(shí)間同步差的各種 實(shí)施例。
根據(jù)本發(fā)明的一個(gè)實(shí)施例的音頻信號(hào)處理過(guò)程通過(guò)將包括聲道縮減混音信號(hào) 和空間信息的經(jīng)解碼的音頻信號(hào)進(jìn)行解碼處理來(lái)生成多聲道音頻信號(hào)。
在解碼期間，聲道縮減混音信號(hào)和空間信息經(jīng)歷不同的過(guò)程，這可導(dǎo)致不同的時(shí)延。
在編碼期間，聲道縮減混音信號(hào)和空間信息可被編碼成時(shí)間同步。 在這一情況下，聲道縮減混音信號(hào)和空間信息可通過(guò)考慮在其中聲道縮減混
音解碼單元100、 100a或100b處理的聲道縮減混音信號(hào)被發(fā)送到多聲道解碼單元 200、 200a或200b的域來(lái)進(jìn)行時(shí)間同步。
在某些實(shí)施例中，聲道縮減混音譯碼標(biāo)識(shí)符可被包括在經(jīng)編碼的音頻信號(hào)中 用于識(shí)別聲道縮減混音信號(hào)和空間信息之間的時(shí)間同步在其中匹配的域。在這一情 況下，聲道縮減混音譯碼標(biāo)識(shí)符可指示聲道縮減混音信號(hào)的解碼方案。
例如，如果聲道縮減混音譯碼標(biāo)識(shí)符識(shí)別高級(jí)音頻譯碼(AAC)解碼方案，則經(jīng) 編碼的音頻信號(hào)可由AAC解碼器來(lái)解碼。
在某些實(shí)施例中，聲道縮減混音譯碼標(biāo)識(shí)符還可用于確定將聲道縮減混音信 號(hào)和空間信息之間的時(shí)間同步進(jìn)行匹配的域。
在根據(jù)本發(fā)明的一個(gè)實(shí)施例處理音頻信號(hào)的方法中，可在不同于時(shí)間同步在 其中匹配的域中處理聲道縮減混音信號(hào)，然后將其發(fā)送到多聲道解碼單元200、 200a或200b。在這種情形中，解碼單元200、 200a或200b補(bǔ)償聲道縮減混音信號(hào) 和空間信息之間的時(shí)間同步，以生成多聲道音頻信號(hào)。
參考圖1和圖4解釋補(bǔ)償聲道縮減混音信號(hào)和空間信息之間的時(shí)間同步差的 方法如下。
圖4是圖l所示的多聲道解碼單元200的框圖。
參考圖l和圖4，在根據(jù)本發(fā)明的一個(gè)實(shí)施例處理音頻信號(hào)的方法中，聲道縮 減混音解碼單元IOO(圖l)中的聲道縮減混音信號(hào)可以在兩種類(lèi)型的域之一中發(fā)送 到多聲道解碼單元200。在本發(fā)明中，假設(shè)聲道縮減混音信號(hào)和空間信息利用在 QMF域中的時(shí)間同步匹配在一起。其它的域也是可能的。
在圖4所示的例子中，在QMF域中處理的聲道縮減混音信號(hào)XQ1被發(fā)送到 多聲道解碼單元200用于信號(hào)處理。
發(fā)送的聲道縮減混音信號(hào)XQ1在多聲道生成單元230中與空間信息SI1組合， 生成多聲道音頻信號(hào)XM1。
在這種情形中，空間信息SI1在按對(duì)應(yīng)于編碼時(shí)的時(shí)間同步的時(shí)間進(jìn)行延遲 之后與聲道縮減混音信號(hào)XQ1進(jìn)行組合。延遲可以是編碼延遲。因?yàn)榭臻g信息SI1 和聲道縮減混音信號(hào)XQ1利用在編碼時(shí)時(shí)間同步來(lái)匹配，所以可生成多聲道音頻 信號(hào)而不用特殊的同步匹配過(guò)程。即，在這種情形中，空間信息ST1未按解碼延遲而進(jìn)行延遲。
除XQ1夕卜，在時(shí)域中處理的聲道縮減混音信號(hào)XT1被發(fā)送到多聲道解碼單元
200用于信號(hào)處理。如圖1所示，在QMF域中的聲道縮減混音信號(hào)XQ1通過(guò)域變 換單元110變換為在時(shí)域中的聲道縮減混音信號(hào)XT1，并將在時(shí)域中的聲道縮減 混音信號(hào)XT1發(fā)送到多聲道解碼單元200。
再次參考圖4，發(fā)送的聲道縮減混音信號(hào)XT1通過(guò)域變換單元210變換成在 QMF域中的聲道縮減混音信號(hào)Xql。
在將在時(shí)域中的聲道縮減混音信號(hào)XT1發(fā)送到多聲道解碼單元200時(shí)，聲道 縮減混音信號(hào)Xql和空間信息SI2中的至少一個(gè)可在完成了時(shí)延補(bǔ)償之后發(fā)送到 多聲道生成單元230。
多聲道生成單元230可通過(guò)將發(fā)送的聲道縮減混音信號(hào)Xql'和空間信息SI2' 組合生成多聲道音頻信號(hào)XM1 。
時(shí)延補(bǔ)償可在聲道縮減混音信號(hào)Xql和空間信息SI2中的至少一個(gè)上執(zhí)行， 因?yàn)榭臻g信息和聲道縮減混音信號(hào)之間的時(shí)間同步在編碼時(shí)在QMF域中匹配。域 變換聲道縮減混音信號(hào)Xql可在補(bǔ)償了在信號(hào)延遲處理單元220中失配的時(shí)間同 步差之后輸入到多聲道生成單元230。
補(bǔ)償時(shí)間同步差的方法是使聲道縮減混音信號(hào)Xql按時(shí)間同步差超前。在這 種情形中，時(shí)間同步差可以是由域變換單元110生成的延遲時(shí)間和域變換單元210 的延遲時(shí)間的總和。
還可通過(guò)補(bǔ)償空間信息SI2的時(shí)延來(lái)補(bǔ)償時(shí)間同步差。對(duì)于該情形，將空間 信息SI2按在空間信息延遲處理單元240中時(shí)間同步差滯后，然后發(fā)送到多聲道生 成單元230。
充分延遲了的空間信息的延遲值對(duì)應(yīng)于失配的時(shí)間同步差和使時(shí)間同步匹配 的延遲時(shí)間的總和。即，延遲的空間信息被延遲的量是編碼延遲和解碼延遲。該總 和還對(duì)應(yīng)于在聲道縮減混音解碼單元IOO(圖l)中生成的聲道縮減混音信號(hào)和空間 信息之間的時(shí)間同步差與在多聲道解碼單元200中生成的時(shí)間同步差的總和。
充分延遲了的空間信息SI2的延遲值可通過(guò)考慮濾波器(例如，QMF、混合濾 波器組)的性能和延遲來(lái)確定。
例如，考慮了濾波器性能和延遲的空間信息延遲值可以是961次時(shí)間采樣。 在分析空間信息的延遲值的情形中，聲道縮減混音解碼單元100中生成的時(shí)間同步 差是257次時(shí)間采樣，而多聲道解碼單元200中生成的時(shí)間同步差是704次時(shí)間采樣。盡管延遲值由時(shí)間采樣單位表示，但它也可由時(shí)隙單位表示。
圖5是圖2所示的多聲道解碼單元200a的框圖。
參考圖2和圖5，在根據(jù)本發(fā)明的一個(gè)實(shí)施例處理音頻信號(hào)的方法中，在聲道 縮減混音解碼單元100a中處理的聲道縮減混音信號(hào)可在兩種類(lèi)型的域之一中發(fā)送 到多聲道解碼單元200a。在本實(shí)施例中，假設(shè)聲道縮減混音信號(hào)和空間信息利用 在QMF域中的時(shí)間同步匹配在一起。其它的域也是可能的。可處理其聲道縮減混 音信號(hào)和空間信息在不同于時(shí)域的域上匹配的音頻信號(hào)。
在圖2中，在時(shí)域中處理的聲道縮減混音信號(hào)XT2被發(fā)送到多聲道解碼單元 200a用于信號(hào)處理。
在MDCT域中的聲道縮減混音信號(hào)Xm通過(guò)域變換單元110a變換成在時(shí)域中 的聲道縮減混音信號(hào)XT2。
然后將變換的聲道縮減混音信號(hào)XT2發(fā)送到多聲道解碼單元200a。
發(fā)送的聲道縮減混音信號(hào)XT2通過(guò)域變換單元210a變換成在QMF域中的聲 道縮減混音信號(hào)Xq2，然后發(fā)送到多聲道生成單元230a。
發(fā)送的聲道縮減混音信號(hào)Xq2在多聲道生成單元230a中與空間信息SI3組合， 生成多聲道音頻信號(hào)XM2。
在這種情形中，空間信息SI3在按對(duì)應(yīng)于編碼時(shí)的時(shí)間同步的時(shí)間量進(jìn)行延 遲之后與聲道縮減混音信號(hào)Xq2組合。延遲可以是編碼延遲。因?yàn)榭臻g信息SI3 和聲道縮減混音信號(hào)Xq2利用在編碼時(shí)的時(shí)間同步來(lái)匹配，所以可生成多聲道音 頻信號(hào)而不用特殊的同步匹配過(guò)程。即，在這種情形中，空間信息SI3未按解碼延 遲而進(jìn)行延遲。
在某些實(shí)施例中，在QMF域中處理的聲道縮減混音信號(hào)XQ2被發(fā)送到多聲 道解碼單元200a用于信號(hào)處理。
在MDCT域中處理的聲道縮減混音信號(hào)Xm是從聲道縮減混音解碼單元100a 輸出的。輸出的聲道縮減混音信號(hào)Xm通過(guò)域變換單元300a變換成在QMF域中 的聲道縮減混音信號(hào)XQ2。變換的聲道縮減混音信號(hào)XQ2然后發(fā)送到多聲道解碼 單元200a。
當(dāng)QMF域中的聲道縮減混音信號(hào)XQ2發(fā)送到多聲道解碼單元200a后，聲道 縮減混音信號(hào)XQ2或空間信息SI4中的至少一個(gè)在完成了時(shí)延補(bǔ)償之后被發(fā)送到 多聲道生成單元230a。
多聲道生成單元230a可通過(guò)將發(fā)送的聲道縮減混音信號(hào)XQ2'和空間信息SI4'組合起來(lái)生成多聲道音頻信號(hào)XM2。
之所以應(yīng)當(dāng)對(duì)聲道縮減混音信號(hào)XQ2和空間信息SI4中的至少一個(gè)進(jìn)行時(shí)延 補(bǔ)償，是因?yàn)榭臻g信息和聲道縮減混音信號(hào)之間的時(shí)間同步是在編碼時(shí)在時(shí)域中匹 配的?？蓪⒂蜃儞Q聲道縮減混音信號(hào)XQ2在信號(hào)延遲處理單元220a中補(bǔ)償失配的 時(shí)間同步差之后輸入到多聲道生成單元230a。
一種補(bǔ)償時(shí)間同步差的方法是將聲道縮減混音信號(hào)XQ2滯后一個(gè)時(shí)間同步 差。在這種情形中，時(shí)間同步差可以是由域變換單元100a生成的延遲時(shí)間和由域 變換單元210a生成的延遲時(shí)間的總和與由域變換單元300a生成的延遲時(shí)間之差。
還可通過(guò)補(bǔ)償空間信息SI4的時(shí)延來(lái)補(bǔ)償時(shí)間同步差。對(duì)于這一情形，空間 信息SI4按在空間信息延遲處理單元240a中的時(shí)間同步差超前，然后被發(fā)送到多 聲道生成單元230a。
充分延遲了的空間信息的延遲值對(duì)應(yīng)于失配時(shí)間同步差和使時(shí)間同步匹配的 延遲時(shí)間的總和。即，延遲的空間信息SI4'是按編碼延遲和解碼延遲進(jìn)行延遲的。
根據(jù)本發(fā)明的一個(gè)實(shí)施例處理音頻信號(hào)的方法包括編碼音頻信號(hào)，其聲道 縮減混音信號(hào)和空間信息之間的時(shí)間同步是通過(guò)假設(shè)一具體解碼方案來(lái)匹配的；以 及解碼所述經(jīng)變換的音頻信號(hào)。
有若干個(gè)基于質(zhì)量(例如，高質(zhì)量AAC)或基于功率(例如，低復(fù)雜度AAC)的 解碼方案的例子。高質(zhì)量解碼方案輸出一種音頻質(zhì)量比功率較低的解碼方案的音頻 質(zhì)量更精準(zhǔn)的多聲道音頻信號(hào)。較低功率的解碼方案因其配置而具有相對(duì)低的功 耗，它不像高質(zhì)量解碼方案那么復(fù)雜。
在以下的描述中，高質(zhì)量和低功率的解碼方案被用作解釋本發(fā)明的例子。其 它的解碼方案同等地適用于本發(fā)明的實(shí)施例。
圖6是根據(jù)本發(fā)明的另一個(gè)實(shí)施例解碼音頻信號(hào)的方法的框圖。
參考圖6，根據(jù)本發(fā)明的解碼裝置包括聲道縮減混音解碼單元100c和多聲道 解碼單元200c。
在某些實(shí)施例中，在聲道縮減混音解碼單元100c中處理后的聲道縮減混音信 號(hào)XT4被發(fā)送到多聲道解碼單元200c，其中信號(hào)與空間信息SI7或SI8組合以生 成多聲道音頻信號(hào)M1或M2。在這種情形中，經(jīng)處理的聲道縮減混音信號(hào)XT4是 在時(shí)域中的聲道縮減混音信號(hào)。
經(jīng)編碼的聲道縮減混音信號(hào)DB被發(fā)送到聲道縮減混音解碼單元100c并加以 處理。經(jīng)處理的聲道縮減混音信號(hào)XT4被發(fā)送到多聲道解碼單元200c，它根據(jù)以下兩種解碼方案之一生成多聲道音頻信號(hào)高質(zhì)量解碼方案和低功率解碼方案。
在經(jīng)處理的聲道縮減混音信號(hào)XT4由低功率解碼方案解碼的情形中，聲道縮
減混音信號(hào)XT4沿路徑P2發(fā)送并解碼。經(jīng)處理的聲道縮減混音信號(hào)XT4通過(guò)域 變換單元240c變換成在實(shí)QMF域中的信號(hào)XRQ。
經(jīng)變換的聲道縮減混音信號(hào)XRQ通過(guò)域變換單元250c變換成在復(fù)QMF域 (complex domain)中的信號(hào)XQC2。 XRQ聲道縮減混音信號(hào)至XQC2聲道縮減混 音信號(hào)的變換是復(fù)數(shù)域(complexitydomain)變換的一個(gè)例子。
隨后，在復(fù)QMF域中的信號(hào)XQC2在多聲道生成單元260c中與空間信息SI8 組合，生成多聲道音頻信號(hào)M2。
因此，在通過(guò)低功率解碼方案解碼聲道縮減混音信號(hào)XT4時(shí)，不需要單獨(dú)的 延遲處理過(guò)程。這是因?yàn)槁暤揽s減混音信號(hào)和空間信息之間的時(shí)間同步在音頻信號(hào) 編碼時(shí)已經(jīng)根據(jù)低功率解碼方案匹配了。 S卩，在這種情形中，聲道縮減混音信號(hào) XRQ未按解碼延遲而進(jìn)行延遲。
在經(jīng)處理的聲道縮減混音信號(hào)XT4是通過(guò)高質(zhì)量解碼方案解碼的情形中，聲 道縮減混音信號(hào)XT4沿路徑Pl發(fā)送并解碼。經(jīng)處理的聲道縮減混音信號(hào)XT4通 過(guò)域變換單元210c變換成在復(fù)QMF域中的信號(hào)XCQ1 。
然后，變換的聲道縮減混音信號(hào)XCQ1在信號(hào)延遲處理單元220c中按聲道縮 減混音信號(hào)XCQ1和空間信息SI7之間的時(shí)延差進(jìn)行延遲。
隨后，延遲的聲道縮減混音信號(hào)XCQl'在多聲道生成單元230c中與空間信息 SI7組合，這個(gè)多聲道生成單元230c生成多聲道音頻信號(hào)Ml 。
因此，聲道縮減混音信號(hào)XCQ1穿過(guò)信號(hào)延遲處理單元220c。這是因?yàn)閷?duì)音 頻信號(hào)的編碼是基于將要使用低功率解碼方案的假設(shè)而進(jìn)行的，故而生成了聲道縮 減混音信號(hào)XCQ1和空間信息SI7之間的時(shí)間同步差。
時(shí)間同步差是一個(gè)取決于所使用的解碼方案的時(shí)延差。例如，因?yàn)榈凸β式?碼方案的解碼過(guò)程不同于高質(zhì)量解碼方案的解碼過(guò)程而發(fā)生時(shí)延差。在將聲道縮減 混音信號(hào)和空間信息相組合的時(shí)間點(diǎn)之前都要考慮時(shí)延差，因?yàn)樵诮M合了聲道縮減 混音信號(hào)和空間信息的時(shí)間點(diǎn)之后可能就不需要同步聲道縮減混音信號(hào)和空間信 息了。
在圖6中，時(shí)間同步差是在將聲道縮減混音信號(hào)XCQ2和空間信息SI8相組 合的時(shí)間點(diǎn)之前發(fā)生的第一延遲時(shí)間與在將聲道縮減混音信號(hào)XCQ1'和空間信息 SI7相組合的時(shí)間點(diǎn)之前發(fā)生第二延遲時(shí)間之差。在該情形中，時(shí)間采樣或時(shí)隙可用作時(shí)延的單位。
如果在域變換單元210c中發(fā)生的延遲時(shí)間等于域變換單元240c中發(fā)生的延 遲時(shí)間，信號(hào)延遲處理單元220c將聲道縮減混音信號(hào)XCQ1按域變換單元250c 中發(fā)生的延遲時(shí)間進(jìn)行延遲就足夠了。
根據(jù)圖6所示的實(shí)施例，兩個(gè)解碼方案包括在多聲道解碼單元200c中?；蛘撸?一種解碼方案可包括在多聲道解碼單元200c中。
在本發(fā)明的以上解釋的實(shí)施例中，聲道縮減混音信號(hào)和空間信息之間的時(shí)間 同步根據(jù)低功率解碼方案來(lái)匹配。然而，本發(fā)明還包括聲道縮減混音信號(hào)和空間信 息之間的時(shí)間同步根據(jù)高質(zhì)量解碼方案來(lái)匹配的情形。在該情形中，聲道縮減混音 信號(hào)以與通過(guò)低功率解碼方案匹配時(shí)間同步的情形相反的方式超前(is led)。
圖7是根據(jù)本發(fā)明的另一個(gè)實(shí)施例解釋解碼音頻信號(hào)的方法的框圖。
參考圖7，根據(jù)本發(fā)明的解碼裝置包括聲道縮減混音解碼單元lOOd和多聲道 解碼單元200d。
在聲道縮減混音解碼單元100d中處理的聲道縮減混音信號(hào)XT4被發(fā)送到多聲 道解碼單元200d，在其中聲道縮減混音信號(hào)與空間信息SI7'或SI8組合，生成多聲 道音頻信號(hào)M3或M2。在這種情形中，經(jīng)處理的聲道縮減混音信號(hào)XT4是在時(shí)域 中的信號(hào)。
經(jīng)編碼的聲道縮減混音信號(hào)DB被發(fā)送到聲道縮減混音解碼單元100d并加以 處理。經(jīng)處理的聲道縮減混音信號(hào)XT4被發(fā)送到多聲道解碼單元200d，它根據(jù)以 下兩種解碼方案之一生成多聲道音頻信號(hào)高質(zhì)量解碼方案和低功率解碼方案。
在經(jīng)處理的聲道縮減混音信號(hào)XT4按低功率解碼方案解碼的情形中，聲道縮 減混音信號(hào)XT4沿路徑P4發(fā)送并解碼。經(jīng)處理的聲道縮減混音信號(hào)XT4通過(guò)域 變換單元240c變換成在實(shí)QMF域中的(in real QMF domain)信號(hào)XRQ。
經(jīng)變換的聲道縮減混音信號(hào)XRQ通過(guò)域變換單元250c變換成在復(fù)QMF域中 的信號(hào)XQC2。 XRQ聲道縮減混音信號(hào)至XQC2聲道縮減混音信號(hào)的變換是復(fù)數(shù) 域變換的一個(gè)例子。
隨后，在復(fù)QMF域中的信號(hào)XQC2在多聲道生成單元260d中與空間信息SI8 組合，生成多聲道音頻信號(hào)M2。
因此，在通過(guò)低功率解碼方案解碼聲道縮減混音信號(hào)XT4時(shí)，不需要單獨(dú)的 延遲處理過(guò)程。這是因?yàn)槁暤揽s減混音信號(hào)和空間信息之間的時(shí)間同步在音頻信號(hào) 編碼時(shí)已經(jīng)根據(jù)低功率解碼方案匹配了。 g卩，在這種情形中，空間信息SI8未按解碼延遲進(jìn)行延遲。
在經(jīng)處理的聲道縮減混音信號(hào)XT4按高質(zhì)量解碼方案解碼的情形中，聲道縮 減混音信號(hào)XT4沿路徑P3發(fā)送并解碼。經(jīng)處理的聲道縮減混音信號(hào)XT4通過(guò)域 變換單元210d變換成在復(fù)QMF域中的信號(hào)XCQ1。
變換的聲道縮減混音信號(hào)XCQ1被發(fā)送到多聲道生成單元230d，在其中它與 空間信息SI7'組合，生成多聲道音頻信號(hào)M3。在這種情形中，空間信息SI7'是一 個(gè)其時(shí)延在空間信息SI7穿過(guò)空間信息延遲處理單元220d時(shí)被補(bǔ)償了的空間信息。
因此，空間信息SI7穿過(guò)空間信息延遲處理單元220d。這是因?yàn)閷?duì)音頻信號(hào) 的編碼是基于將要使用低功率解碼方案的假設(shè)而進(jìn)行的，故而生成了聲道縮減混音 信號(hào)XCQ1和空間信息SI7之間的時(shí)間同步差。
時(shí)間同步差是一個(gè)取決于所使用的解碼方案的時(shí)延差。例如，因?yàn)榈凸β式?碼方案的解碼過(guò)程不同于高質(zhì)量解碼方案的解碼過(guò)程而發(fā)生了時(shí)延差。在將聲道縮 減混音信號(hào)和空間信息相組合的時(shí)間點(diǎn)之前都要考慮時(shí)延差，因?yàn)樵趯⒙暤揽s減混 音信號(hào)和空間信息相組合的時(shí)間點(diǎn)之后，可能就不需要同步聲道縮減混音信號(hào)和空 間信息了。
在圖7中，時(shí)間同步差是一個(gè)在將聲道縮減混音信號(hào)XCQ2和空間信息SI8 相組合的時(shí)間點(diǎn)之前發(fā)生的第一延遲時(shí)間與在將聲道縮減混音信號(hào)XCQ1和空間 信息SI7'相組合的時(shí)間點(diǎn)之前發(fā)生第二延遲時(shí)間之差。在該情形中，時(shí)間采樣或時(shí) 隙可用作時(shí)延的單位。
如果在域變換單元210d中發(fā)生的延遲時(shí)間等于域變換單元240d中發(fā)生的延 遲時(shí)間，則空間信息延遲處理單元220d將空間信息SI7按域變換單元250d中所發(fā) 生的延遲時(shí)間進(jìn)行超前就足夠了。
在所示的例子中，兩個(gè)解碼方案包括在多聲道解碼單元200d中?；蛘?， 一個(gè) 解碼方案可包括在多聲道解碼單元200d中。
在本發(fā)明的以上解釋的實(shí)施例中，聲道縮減混音信號(hào)和空間信息之間的時(shí)間 同步是根據(jù)低功率解碼方案匹配的。然而，本發(fā)明還包括聲道縮減混音信號(hào)和空間 信息之間的時(shí)間同步根據(jù)高質(zhì)量解碼方案匹配的情形。在該情形中，聲道縮減混音 信號(hào)以與通過(guò)低功率解碼方案匹配時(shí)間同步的情形相反的方式滯后的(is lagged)。
盡管圖6和圖7示例性地示出信號(hào)延遲處理單元220c和空間信息延遲單元 220d中的一個(gè)包括在多聲道解碼單元200c或200d中，但本發(fā)明包括其中空間信 息延遲處理單元220d和信號(hào)延遲處理單元200c包括在多聲道解碼單元200c或200d中的實(shí)施例。在這種情形中，空間信息延遲處理單元220d中的延遲補(bǔ)償時(shí)間 和信號(hào)延遲處理單元220c中的延遲補(bǔ)償時(shí)間的總和應(yīng)當(dāng)?shù)扔跁r(shí)間同步差。
以上描述中解釋的是補(bǔ)償由于存在多個(gè)聲道縮減混音輸入域的存在引起的時(shí) 間同步差的方法和補(bǔ)償由于多個(gè)解碼方案的存在引起的時(shí)間同步差的方法。
以下解釋用于補(bǔ)償由于多個(gè)聲道縮減混音輸入域的存在和多個(gè)解碼方案的存 在引起的時(shí)間同步差的方法。
圖8是根據(jù)本發(fā)明的一個(gè)實(shí)施例解釋解碼音頻信號(hào)的方法的框圖。
參考圖8，根據(jù)本發(fā)明的解碼裝置包括聲道縮減混音解碼單元100e和多聲道 解碼單元200e。
在根據(jù)本發(fā)明的另一個(gè)實(shí)施例處理音頻信號(hào)的方法中，在聲道縮減混音解碼 單元100e中處理的聲道縮減混音信號(hào)在兩種類(lèi)型的域之一中發(fā)送到多聲道解碼單 元200e。在本發(fā)明的實(shí)施例中，假設(shè)聲道縮減混音信號(hào)和空間信息之間的時(shí)間同 步參考低功率解碼方案在QMF域上匹配?；蛘撸蓪⒏鞣N修改應(yīng)用于本發(fā)明。
以下解釋在QMF域中處理的聲道縮減混音信號(hào)XQ5通過(guò)發(fā)送到多聲道解碼 單元200e來(lái)處理的方法。在這種情形中，聲道縮減混音信號(hào)XQ5可以是復(fù)QMF 信號(hào)XCQ5和實(shí)QMF信號(hào)XRQ5中的任一個(gè)。XCQ5在聲道縮減混音解碼單元100e 中通過(guò)高質(zhì)量解碼方案處理。XRQ5在聲道縮減混音解碼單元100e中通過(guò)低功率 解碼方案處理。
在本實(shí)施例中，假設(shè)在聲道縮減混音解碼單元100e中通過(guò)高質(zhì)量解碼方案處 理的信號(hào)被連接到高質(zhì)量解碼方案的多聲道解碼單元200e，在聲道縮減混音解碼 單元100e中通過(guò)低功率解碼方案處理的信號(hào)被連接到低功率解碼方案的多聲道解 碼單元200e?；蛘?，可將各種修改應(yīng)用于本發(fā)明。
在處理的聲道縮減混音信號(hào)XQ5通過(guò)低功率解碼方案解碼的情形中，聲道縮 減混音信號(hào)XQ5沿路徑P6發(fā)送并解碼。在這種情形中，XQ5是實(shí)QMF域中的聲 道縮減混音信號(hào)XRQ5。
聲道縮減混音信號(hào)XRQ5在多聲道生成單元231e中與空間信息SI10組合以 生成多聲道音頻信號(hào)M5。
因此，在通過(guò)低功率解碼方案解碼聲道縮減混音信號(hào)XQ5時(shí)，不需要單獨(dú)的 延遲處理程序。這是因?yàn)槁暤揽s減混音信號(hào)和空間信息之間的時(shí)間同步在音頻信號(hào) 譯碼時(shí)已經(jīng)根據(jù)低功率解碼方案匹配了。
在處理的聲道縮減混音信號(hào)XQ5通過(guò)高質(zhì)量解碼方案解碼的情形中，聲道縮減混音信號(hào)XQ5沿路徑P5發(fā)送并解碼。在這種情形中，XQ5是在復(fù)QMF域中的 聲道縮減混音信號(hào)XCQ5。聲道縮減混音信號(hào)XCQ5在多聲道生成單元230e中與 空間信息SI9組合以生成多聲道音頻信號(hào)M4。
以下解釋的是在時(shí)域中處理的聲道縮減混音信號(hào)XT5被發(fā)送到多聲道解碼單 元200e用于信號(hào)處理的情形。
在聲道縮減混音解碼單元100e中處理的聲道縮減混音信號(hào)XT5被發(fā)送到多聲 道解碼單元200e，在多聲道解碼單元200e中它與空間信息SI11或SI12組合，生 成多聲道音頻信號(hào)M6或M7。
聲道縮減混音信號(hào)XT5被發(fā)送到多聲道解碼單元200e，該多聲道解碼單元 200e根據(jù)以下兩種解碼方案之一生成多聲道音頻信號(hào)高質(zhì)量解碼方案和低功率 解碼方案。
在處理的聲道縮減混音信號(hào)XT5通過(guò)低功率解碼方案解碼的情形中，聲道縮 減混音信號(hào)XT5沿路徑P8傳輸并解碼。處理的聲道縮減混音信號(hào)XT5通過(guò)域變 換單元241e變換成在實(shí)QMF域中的信號(hào)XR。
經(jīng)變換的聲道縮減混音信號(hào)XR通過(guò)域變換單元250e變換成在復(fù)QMF域中 的信號(hào)XC2。 XR聲道縮減混音信號(hào)至XC2聲道縮減混音信號(hào)的變換是復(fù)數(shù)域變 換的一個(gè)例子。
隨后，在復(fù)QMF域中的信號(hào)XC2在多聲道生成單元233e中與空間信息SI12' 組合，生成多聲道音頻信號(hào)M7。
在這種情形中，空間信息SI12'是在空間信息SI12穿過(guò)空間信息延遲處理單元 240e時(shí)其時(shí)延被補(bǔ)償了的空間信息。
因此，空間信息SI12穿過(guò)空間信息延遲處理單元240e。這是因?yàn)橛捎谕ㄟ^(guò)低 功率解碼方案執(zhí)行的音頻信號(hào)編碼是基于聲道縮減混音信號(hào)和空間信息之間的時(shí) 間同步匹配的域是QMF域的假設(shè)而進(jìn)行的，在聲道縮減混音信號(hào)XC2和空間信 息SI12之間生產(chǎn)了時(shí)間同步。這里延遲的空間信息SI12'按編碼延遲和解碼延遲進(jìn) 行延遲。
在處理的聲道縮減混音信號(hào)XT5通過(guò)高質(zhì)量解碼方案解碼的情形中，聲道縮 減混音信號(hào)XT5沿路徑P7發(fā)送并解碼。處理的聲道縮減混音信號(hào)XT5通過(guò)域變 換單元240e變換成在復(fù)QMF域中的信號(hào)XC1。
變換的聲道縮減混音信號(hào)XCl和空間信息SIll分別在信號(hào)延遲處理單元250e 和空間信息延遲處理單元260e中按聲道縮減混音信號(hào)XC1和空間信息SI11之間的時(shí)間同步差補(bǔ)償時(shí)延。
隨后，時(shí)延補(bǔ)償了的聲道縮減混音信號(hào)XC1'在多聲道生成單元232e中與時(shí)延 補(bǔ)償了的空間信息SI11'組合，該多聲道生成單元232e生成多聲道音頻信號(hào)M6。
因此，聲道縮減混音信號(hào)XC1穿過(guò)信號(hào)延遲單元250e，而空間信息SI11穿 過(guò)空間信息延遲處理單元260e。這是因?yàn)閷?duì)音頻信號(hào)的編碼是在假設(shè)低功率解碼 方案條件下且基于聲道縮減混音信號(hào)和空間信息之間的時(shí)間同步匹配的域是QMF 域的進(jìn)一步假設(shè)下進(jìn)行的，聲道縮減混音信號(hào)XC1和空間信息SI11之間的時(shí)間同 步差由此生成。
圖9是根據(jù)本發(fā)明的一個(gè)實(shí)施例解釋解碼音頻信號(hào)的方法的框圖。 參考圖9，根據(jù)本發(fā)明的解碼裝置包括聲道縮減混音解碼單元100f和多聲道 解碼單元200f。
經(jīng)編碼的聲道縮減混音信號(hào)被發(fā)送到聲道縮減混音解碼單元100f然后進(jìn)行處 理。聲道縮減混音信號(hào)DB1考慮兩種聲道縮減混音解碼方案來(lái)編碼，包括第一聲 道縮減混音解碼和第二聲道縮減混音解碼方案。
在聲道縮減混音解碼單元100f中根據(jù)一種聲道縮減混音解碼方案處理聲道縮 減混音信號(hào)DB1。這一種聲道縮減混音解碼方案可以是第一聲道縮減混音解碼方 案。
經(jīng)處理的聲道縮減混音信號(hào)XT6被發(fā)送到多聲道解碼單元200f，其生成多聲 道音頻信號(hào)Mf。
經(jīng)處理的聲道縮減混音信號(hào)XT6'按信號(hào)處理單元210f中的解碼延遲進(jìn)行延 遲。聲道縮減混音信號(hào)XT6'可因解碼延遲而延遲。聲道縮減混音信號(hào)XT6之所以 被延遲，是因?yàn)槭窃诰幋a時(shí)使用的聲道縮減混音解碼方案與解碼時(shí)使用的聲道縮減 混音解碼方案不同。
因此，有必要根據(jù)情況對(duì)聲道縮減混音信號(hào)XT6'做升采樣處理(upsample)。
延遲后的聲道縮減混音信號(hào)XT6'在升采樣(upsampling)單元200f中做升采 樣處理。對(duì)聲道縮減混音信號(hào)XT6'升采樣的原因是聲道縮減混音信號(hào)XT6'的 采樣數(shù)與空間信息SI13的采樣數(shù)不同。
聲道縮減混音信號(hào)XT6的延遲處理和聲道縮減混音信號(hào)XT6'的升采樣處理 在順序升是可互換的。
升采樣后的聲道縮減混音信號(hào)UXT6的域在域處理單元230f中變換。聲道縮 減混音信號(hào)UXT6的域的變換可包括F/T域變換和復(fù)數(shù)域變換。隨后，域變換后的聲道縮減混音信號(hào)UXTD6在多聲道生成單元260d中與空 間信息SI13組合，生成多聲道音頻信號(hào)Mf。
以下描述中解釋的是補(bǔ)償聲道縮減混音信號(hào)和空間信息之間生成的時(shí)間同步 差的方法。
以下描述中解釋的是補(bǔ)償通過(guò)上述方法之一生成的時(shí)序數(shù)據(jù)和多聲道音頻信 號(hào)之間生成的時(shí)間同步差的方法。
圖IO是根據(jù)本發(fā)明的一個(gè)實(shí)施例解碼音頻信號(hào)的裝置的框圖。
參考圖10，根據(jù)本發(fā)明的一個(gè)實(shí)施例解碼音頻信號(hào)的裝置包括時(shí)序數(shù)據(jù)解碼 單元10和多聲道音頻信號(hào)處理單元20。
多聲道音頻信號(hào)處理單元20包括聲道縮減混音解碼單元21、多聲道解碼單元 22和時(shí)間延遲補(bǔ)償單元23。
聲道縮減混音比特流IN2是經(jīng)編碼的聲道縮減混音信號(hào)的一個(gè)例子，其被輸 入到聲道縮減混音解碼單元21中以待解碼。
在該情形中，聲道縮減混音比特流IN2可在兩種域中解碼和輸出?？捎玫妮?出域包括時(shí)域和QMF域。附圖標(biāo)記'50'指示在時(shí)域中解碼和輸出的聲道縮減混 音信號(hào)，而附圖標(biāo)記、r指示在QMF域中解碼和輸出的聲道縮減混音信號(hào)。在 本發(fā)明的實(shí)施例中，描述了兩種域。然而，本發(fā)明包括在其它類(lèi)型的域中解碼和輸 出的聲道縮減混音信號(hào)。
聲道縮減混音信號(hào)50和51被發(fā)送到多聲道解碼單元20，然后分別根據(jù)兩種 解碼方案22H和22L解碼。在這種情形中，附圖標(biāo)記'22H，指示高質(zhì)量解碼方 案，附圖標(biāo)記'221/指示低功率解碼方案。
在本發(fā)明的這個(gè)實(shí)施例中，僅采用了兩種解碼方案。然而，本發(fā)明可采用更 多的解碼方案。
在時(shí)域中解碼和輸出的聲道縮減混音信號(hào)50根據(jù)對(duì)兩個(gè)路徑P9和P10中之 一的選擇進(jìn)行解碼。在這種情形中，路徑P9指示通過(guò)高質(zhì)量解碼方案22H解碼的 路徑，路徑P10指示通過(guò)低功率解碼方案22L解碼的路徑。
沿路徑P9發(fā)送的聲道縮減混音信號(hào)50根據(jù)高質(zhì)量解碼方案22H與空間信息 SI組合，生成多聲道音頻信號(hào)MHT。沿路徑P10發(fā)送的聲道縮減混音信號(hào)50根 據(jù)低功率解碼方案22L與空間信息SI組合，生成多聲道音頻信號(hào)MLT。
在QMF域中解碼和輸出的另一聲道縮減混音信號(hào)51根據(jù)對(duì)兩個(gè)路徑Pll和 P12中之一的選擇進(jìn)行解碼。在這種情形中，路徑Pll指示通過(guò)高質(zhì)量解碼方案22H解碼的路徑，路徑P12指示通過(guò)低功率解碼方案22L解碼的路徑。
沿路徑Pl 1發(fā)送的聲道縮減混音信號(hào)51根據(jù)高質(zhì)量解碼方案22H與空間信息 SI組合，生成多聲道音頻信號(hào)MHQ。沿路徑P12發(fā)送的聲道縮減混音信號(hào)51根 據(jù)低功率解碼方案22L與空間信息SI組合，生成多聲道音頻信號(hào)MLQ。
通過(guò)以上解釋的方法生成的多聲道音頻信號(hào)MHT、 MHQ、 MLT和MLQ中 的至少一個(gè)在時(shí)延補(bǔ)償單元23中經(jīng)歷時(shí)延補(bǔ)償過(guò)程，然后作為OUT2、 OUT3、 OUT4或OUT5輸出。
在本發(fā)明的實(shí)施例中，時(shí)延補(bǔ)償過(guò)程采取基于時(shí)序解碼單元10中解碼和輸出 的時(shí)序數(shù)據(jù)OUTl和上述多聲道音頻信號(hào)MHT之間的時(shí)間同步匹配的假設(shè)將時(shí)間 同步失配的多聲道音頻信號(hào)MHQ、 MLT或MKQ與多聲道音頻信號(hào)MHT進(jìn)行比 較的方式防止時(shí)延發(fā)生。當(dāng)然，如果時(shí)序數(shù)據(jù)OUT1與除上述多聲道音頻信號(hào)MHT 外的多聲道音頻信號(hào)MHQ、 MLT和MLQ之一之間的時(shí)間同步匹配，則與時(shí)序數(shù) 據(jù)OUT1的時(shí)間同步可通過(guò)補(bǔ)償其余的時(shí)間同步失配的多聲道音頻信號(hào)之一的時(shí) 延來(lái)匹配。
在時(shí)序數(shù)據(jù)OUT1和多聲道音頻信號(hào)MHT、 MHQ、 MLT或MLQ未被一起 處理的情形中，實(shí)施例也可進(jìn)行時(shí)延補(bǔ)償過(guò)程。例如，利用與多聲道音頻信號(hào)MLT 的比較結(jié)果可補(bǔ)償多聲道音頻信號(hào)的時(shí)延并防止其發(fā)生。這可以以各種方式變化。
本領(lǐng)域內(nèi)技術(shù)人員可以理解，可對(duì)本發(fā)明作出各種修改和變化而不會(huì)脫離本 發(fā)明的精神或范圍。因此，本發(fā)明旨在涵蓋本發(fā)明的所有這些修改和變形，只要它 們落在所附權(quán)利要求書(shū)及其等價(jià)技術(shù)方案的范圍中即可。
工業(yè)適用性
因此，本發(fā)明提供了以下的效果和優(yōu)點(diǎn)。
第一，如果生成聲道縮減混音信號(hào)和空間信息之間的時(shí)間同步差，則本發(fā)明 通過(guò)補(bǔ)償時(shí)間同步差來(lái)防止音頻質(zhì)量劣化。
第二，本發(fā)明能補(bǔ)償時(shí)序數(shù)據(jù)和將與運(yùn)動(dòng)畫(huà)面、文本、靜止圖像等時(shí)序數(shù)據(jù) 一起處理的多聲道音頻信號(hào)之間的時(shí)間同步差。
20
權(quán)利要求
1.一種處理音頻信號(hào)的方法，其包括接收包括聲道縮減混音信號(hào)和空間信息、并依照第一聲道縮減混音解碼方案和第二聲道縮減混音解碼方案編碼的音頻信號(hào)；根據(jù)所述第一聲道縮減混音解碼方案處理所述聲道縮減混音信號(hào)；以及延遲所述經(jīng)處理的聲道縮減混音信號(hào)。
2. 如權(quán)利要求1所述的方法，其特征在于，所述經(jīng)延遲的聲道縮減混音信號(hào) 按解碼延遲來(lái)延遲。
3. 如權(quán)利要求2所述的方法，其特征在于，所述解碼延遲是與根據(jù)所述第二聲道縮減混音解碼方案解碼所述聲道縮減混音信號(hào)相關(guān)聯(lián)的第一經(jīng)歷時(shí)間。
4. 如權(quán)利要求2所述的方法，其特征在于，還包括對(duì)所述經(jīng)處理的聲道縮減混音信號(hào)進(jìn)行升采樣處理。
5. 如權(quán)利要求4所述的方法，其特征在于，所述解碼延遲是所述第一經(jīng)歷時(shí)間和因所述升采樣處理所產(chǎn)生的第二經(jīng)歷時(shí)間之間的差。
6. 如權(quán)利要求2或4所述的方法，其特征在于，還包括 變換所述經(jīng)處理的聲道縮減混音信號(hào)的復(fù)數(shù)域；以及組合所述經(jīng)變換的聲道縮減混音信號(hào)和所述空間信息，其中所述組合的聲道 縮減混音信號(hào)和所述組合的空間信息中的至少一個(gè)被延遲一個(gè)包括所述復(fù)數(shù)域變 換的經(jīng)歷時(shí)間在內(nèi)的時(shí)間量。
7. 如權(quán)利要求6所述的方法，其特征在于，還包括 按編碼延遲和解碼延遲中的至少一個(gè)延遲所述空間信息。
8. 如權(quán)利要求7所述的方法，其特征在于，所述復(fù)數(shù)域變換還包括進(jìn)行實(shí) 正交鏡像濾波器(QMF)域信號(hào)至復(fù)QMF域信號(hào)的變換和復(fù)QMF域信號(hào)至實(shí)QMF 域信號(hào)的變換中的至少一種變換。
9. 如權(quán)利要求8所述的方法，其特征在于，還包括-利用所述組合的聲道縮減混音信號(hào)和空間信息生成多聲道信號(hào)；以及 補(bǔ)償所述多聲道信號(hào)和時(shí)序數(shù)據(jù)之間的時(shí)間同步差。
10. 如權(quán)利要求9所述的方法，其特征在于，所述時(shí)序數(shù)據(jù)包括運(yùn)動(dòng)畫(huà)面、靜 止圖像、文本中的至少一個(gè)。
11. 一種處理音頻信號(hào)的系統(tǒng)，其包括第一解碼器，所述第一解碼器被配置成接收包括聲道縮減混音信號(hào)和空間信息、并依照第一聲道縮減混音解碼方案和第二聲道縮減混音解碼方案編碼的音頻信 號(hào)、且被配置成根據(jù)所述第一聲道縮減混音解碼方案處理所述聲道縮減混音信號(hào)； 以及第一延遲處理器，所述第一延遲處理器操作性地耦合到所述解碼器、且被配 置成延遲所述經(jīng)處理的聲道縮減混音信號(hào)。
12. 如權(quán)利要求11所述的系統(tǒng)，其特征在于，所述經(jīng)延遲的聲道縮減混音信 號(hào)按解碼延遲來(lái)延遲。
13. 如權(quán)利要求12所述的系統(tǒng)，其特征在于，所述解碼延遲是與根據(jù)所述第 二聲道縮減混音解碼方案解碼所述聲道縮減混音信號(hào)相關(guān)聯(lián)的第一經(jīng)歷時(shí)間。
14. 如權(quán)利要求12所述的系統(tǒng)，其特征在于，還包括升釆樣器，所述升采樣器操作性地耦合到所述解碼器、且被配置成對(duì)所述經(jīng) 處理的聲道縮減混音信號(hào)進(jìn)行升采樣處理。
15. 如權(quán)利要求14所述的系統(tǒng)，其特征在于，所述解碼延遲是所述第一經(jīng)歷 時(shí)間和因所述升采樣處理所產(chǎn)生的第二經(jīng)歷時(shí)間之間的差。
16. 如權(quán)利要求12所述的系統(tǒng)，其特征在于，還包括變換器，所述變換器操作性地耦合到所述第一解碼器、且被配置成變換所述經(jīng)處理的聲道縮減混音信號(hào)的復(fù)數(shù)域；以及第二解碼器，所述第二解碼器操作性地耦合到所述變換器、且被配置成對(duì)所 述聲道縮減混音信號(hào)和所述空間信息中的至少一個(gè)補(bǔ)償因所述變換所產(chǎn)生的時(shí)延、 以及組合所述經(jīng)變換的聲道縮減混音信號(hào)和所述空間信息。
17. 如權(quán)利要求16所述的系統(tǒng)，其特征在于，還包括第二延遲處理器，所述第二延遲處理器耦合到所述第一解碼器或所述第二解 碼器、且被配置成按編碼延遲和解碼延遲中的至少一個(gè)延遲所述空間信息。
18. 如權(quán)利要求17所述的系統(tǒng)，其特征在于，所述變換器被配置成進(jìn)行實(shí)正 交鏡像濾波器(QMF)域信號(hào)至復(fù)QMF域信號(hào)的變換和復(fù)QMF域信號(hào)至實(shí)QMF域 信號(hào)的變換中的至少一種變換。
19. 如權(quán)利要求18所述的系統(tǒng)，其特征在于，所述第二解碼器被配置成利用 所述組合的聲道縮減混音信號(hào)和空間信息生成多聲道信號(hào)、以及補(bǔ)償所述多聲道信 號(hào)和時(shí)序數(shù)據(jù)之間的時(shí)間同步差。
20. 如權(quán)利要求19所述的系統(tǒng)，其特征在于，所述時(shí)序數(shù)據(jù)包括運(yùn)動(dòng)畫(huà)面、 靜止圖像、文本中的至少一個(gè)。
21. —種有指令存儲(chǔ)于其上的計(jì)算機(jī)可讀介質(zhì)，所述指令在被處理器執(zhí)行時(shí)使 得所述處理器執(zhí)行以下操作接收包括聲道縮減混音信號(hào)和空間信息、并依照第一聲道縮減混音解碼方案和第二聲道縮減混音解碼方案編碼的音頻信號(hào)；根據(jù)所述第一聲道縮減混音解碼方案處理所述聲道縮減混音信號(hào)；以及 延遲所述經(jīng)處理的聲道縮減混音信號(hào)。
22. —種處理音頻信號(hào)的系統(tǒng)，其包括用于接收包括聲道縮減混音信號(hào)和空間信息、并依照第一聲道縮減混音解碼 方案和第二聲道縮減混音解碼方案編碼的音頻信號(hào)的裝置；用于根據(jù)所述第一聲道縮減混音解碼方案處理所述聲道縮減混音信號(hào)的裝 置；以及用于延遲所述經(jīng)處理的聲道縮減混音信號(hào)的裝置。
全文摘要
本發(fā)明包括用于對(duì)一個(gè)或多個(gè)信號(hào)和/或一個(gè)或多個(gè)參數(shù)在一個(gè)或多個(gè)信號(hào)處理路徑中的時(shí)延進(jìn)行補(bǔ)償?shù)南到y(tǒng)、方法、裝置和計(jì)算機(jī)可讀介質(zhì)。
文檔編號(hào)G10L19/00GK101297596SQ200680039576
公開(kāi)日2008年10月29日 申請(qǐng)日期2006年10月2日 優(yōu)先權(quán)日2005年10月24日
發(fā)明者吳賢午, 房熙錫, 林宰顯, 鄭亮源, 金東秀 申請(qǐng)人:Lg電子株式會(huì)社