專利名稱:多對(duì)象音頻編碼和解碼方法以及其設(shè)備的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種音頻編碼和解碼方法以及其設(shè)備;并且更具體地,涉及一種多對(duì) 象音頻編碼和解碼方法以及其設(shè)備。這項(xiàng)工作受到MIC/IITA 的 IT R&D 計(jì)戈lj [2007-S-004-01, "Developmentof Glassless Single_User3D Broadcasting Technologies (無眼鏡單用戶 3D 廣播技術(shù)的發(fā)
展)”]支持。
背景技術(shù):
引進(jìn)了基于空間隊(duì)列的空間音頻編碼(SAC)方法,作為根據(jù)相關(guān)技術(shù)的用于壓縮 和恢復(fù)音頻信號(hào)的方法。所述SAC方法是為了進(jìn)行多聲道音頻編碼而開發(fā)的技術(shù)。通常,傳統(tǒng)的音頻技術(shù)具有僅允許用戶被動(dòng)地聆聽音頻內(nèi)容的功能限制。因此,傳 統(tǒng)的音頻技術(shù)不能向用戶提供多樣的音頻服務(wù)。
發(fā)明內(nèi)容
技術(shù)問題本發(fā)明的實(shí)施例旨在提供一種用于有效地提供多樣的音頻服務(wù)的編碼和解碼方 法、以及其設(shè)備。本發(fā)明的其它目的和優(yōu)點(diǎn)可通過接下來的描述來理解,并且參考本發(fā)明的實(shí)施例 而變得明顯。此外,對(duì)于本領(lǐng)域的技術(shù)人員還顯然的是,本發(fā)明的目的和優(yōu)點(diǎn)可通過所要求 保護(hù)的手段以及其組合來實(shí)現(xiàn)。技術(shù)解決方案根據(jù)本發(fā)明的一方面,提供了一種多對(duì)象編碼方法,包括通過下混合 (down-mix)前景音頻對(duì)象和背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào);以及生成包括 下混合信號(hào)和殘余信號(hào)的比特流。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻編碼方法,包括通過將單聲道前 景音頻對(duì)象下混合到單聲道背景音頻對(duì)象上來生成下混合信號(hào)和殘余信號(hào);以及生成包括 下混合信號(hào)和殘余信號(hào)的比特流。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象編碼方法,包括通過下混合立體聲前 景音頻對(duì)象和單聲道背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào);以及生成包括下混合信 號(hào)和殘余信號(hào)的比特流。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻編碼方法,包括通過下混合立體 聲前景音頻對(duì)象和立體聲背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào);以及生成包括下混 合信號(hào)和殘余信號(hào)的比特流。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻解碼方法,包括接收比特流,該 比特流包括通過對(duì)前景音頻對(duì)象和背景音頻對(duì)象進(jìn)行下混合而生成的下混合信號(hào)、和根據(jù) 下混合而生成的殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)前景音頻對(duì)象和背景音頻對(duì)象。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻解碼方法,包括接收比特流,該 比特流包括通過對(duì)單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合而生成的下混 合信號(hào)、和在下混合之后剩下的殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)前景 音頻對(duì)象和背景音頻對(duì)象。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻解碼方法,包括接收通過對(duì)立體 聲前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合而生成的下混合信號(hào)、和在下混合之后 剩下的殘余信號(hào);以及使用殘余信號(hào)來恢復(fù)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻解碼方法,包括接收比特流,該 比特流包括通過對(duì)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象進(jìn)行下混合而生成的下混 合信號(hào)、和根據(jù)下混合信號(hào)的殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)立體聲 前景音頻對(duì)象和立體聲背景音頻對(duì)象。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻編碼設(shè)備,包括下混合發(fā)生器, 用于通過對(duì)前景音頻對(duì)象和背景音頻對(duì)象進(jìn)行下混合來生成下混合信號(hào)和殘余信號(hào);以及 生成包括下混合信號(hào)和殘余信號(hào)的比特流。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻編碼設(shè)備,包括下混合發(fā)生器, 用于通過對(duì)單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合來生成下混合信號(hào)和 殘余信號(hào);以及比特流發(fā)生器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻編碼設(shè)備,包括下混合發(fā)生器, 用于通過下混合立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象來生成下混合信號(hào)和殘余信 號(hào);以及比特流發(fā)生器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻編碼設(shè)備,包括下混合發(fā)生器, 用于通過對(duì)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象進(jìn)行下混合來生成下混合信號(hào)和 殘余信號(hào);以及比特流發(fā)生器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻解碼設(shè)備,包括接收器,用于接 收比特流,該比特流包括通過對(duì)前景音頻對(duì)象和背景音頻對(duì)象進(jìn)行下混合來生成的下混合 信號(hào)、和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信 號(hào)中恢復(fù)前景音頻對(duì)象和背景音頻對(duì)象。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻解碼設(shè)備,包括接收器,用于接 收比特流,該比特流包括通過對(duì)單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合來 生成的下混合信號(hào)、和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào) 來從下混合信號(hào)中恢復(fù)單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻解碼設(shè)備,包括接收器,用于接 收比特流,該比特流包括通過對(duì)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合來 生成的下混合信號(hào)、和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào) 來從下混合信號(hào)中恢復(fù)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象。根據(jù)本發(fā)明的另一方面,提供了一種多對(duì)象音頻解碼設(shè)備,包括接收器,用于接 收比特流,該比特流包括通過對(duì)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象進(jìn)行下混合來 生成的下混合信號(hào)、和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象。根據(jù)在下文中陳述的、參考附圖進(jìn)行的如下實(shí)施例描述,本發(fā)明的優(yōu)點(diǎn)、特征和方 面將變得明顯。當(dāng)認(rèn)為關(guān)于相關(guān)技術(shù)的詳細(xì)描述可能模糊本發(fā)明的要點(diǎn)時(shí),這里將被不提 供所述描述。下文中,將參考附圖來詳細(xì)描述本發(fā)明的特定實(shí)施例。有利效果根據(jù)本發(fā)明的編碼和解碼方法以及其設(shè)備可有效地提供多樣的音頻服務(wù)。
圖1是用于描述本發(fā)明的第一構(gòu)思的圖。圖2是用于描述本發(fā)明的第二構(gòu)思的圖。圖3是圖示了圖2中所示的第一下混合發(fā)生器203的圖。圖4是用于描述本發(fā)明的第一實(shí)施例的圖。圖5是用于描述本發(fā)明的第二實(shí)施例的圖。圖6是用于描述本發(fā)明的第三實(shí)施例的圖。圖7是用于描述本發(fā)明的第四實(shí)施例的圖。圖8是用于描述根據(jù)本發(fā)明的實(shí)施例的解碼的圖。圖9是用于描述本發(fā)明的示范實(shí)施例的圖。
具體實(shí)施例方式接下來的描述僅舉例說明了本發(fā)明的原理。即使在本說明書中沒有清楚地描述或 說明它們,本領(lǐng)域的普通技術(shù)人員也可以實(shí)施本發(fā)明的原理并發(fā)明處于本發(fā)明的構(gòu)思和范 圍內(nèi)的各種設(shè)備。在本說明書中呈現(xiàn)的條件術(shù)語的使用和實(shí)施例僅意欲幫助理解本發(fā)明的 構(gòu)思,并且它們不限于在說明書中提及的實(shí)施例和條件。此外,關(guān)于本發(fā)明的原理、觀點(diǎn)和實(shí)施例以及特定實(shí)施例的所有詳細(xì)描述應(yīng)該被 理解為包括它們的結(jié)構(gòu)和功能等效物。所述等效物不僅包括當(dāng)前已知的等效物,而且包括 要在將來開發(fā)的那些等效物,即被發(fā)明來執(zhí)行相同功能的所有裝置,而不管它們的結(jié)構(gòu)。例如,本發(fā)明的框圖應(yīng)該被理解為示出了用于實(shí)施本發(fā)明的原理的示范電路的構(gòu) 思觀點(diǎn)。類似地,所有流程圖、狀態(tài)轉(zhuǎn)換圖、偽代碼等實(shí)際上可表達(dá)在計(jì)算機(jī)可讀介質(zhì)中,并 且無論是否不同地描述計(jì)算機(jī)或處理器,它們都應(yīng)該被理解為表達(dá)由計(jì)算機(jī)或處理器操作 的各種處理。在圖中圖示的各種裝置的功能(其包括被表達(dá)為處理器或類似構(gòu)思的功能塊)不 僅可通過使用專用于所述功能的硬件來提供,而且可通過使用能夠運(yùn)行用于所述功能的合 適軟件的硬件來提供。當(dāng)通過處理器來提供功能時(shí),所述功能可由單個(gè)專用處理器、單個(gè)共 享處理器、或其部分可共享的多個(gè)單獨(dú)處理器來提供。術(shù)語“處理器”、“控制”或類似概念的明顯使用不應(yīng)該被理解為排外地指能夠運(yùn)行 軟件的硬件,而應(yīng)該被理解為隱含地包括數(shù)字信號(hào)處理器(DSP)、硬件、以及用于存儲(chǔ)軟件 的ROM、RAM和非易失性存儲(chǔ)器。其中還可以包括其它的已知并且通常使用的硬件。在本說明書的權(quán)利要求中,被表達(dá)為用于執(zhí)行在詳細(xì)說明中描述的功能的部件的 元件意欲包括用于執(zhí)行包括所有格式的軟件的功能的所有方法,諸如用于執(zhí)行所預(yù)期的功能的電路、固件/微代碼等的組合。為了執(zhí)行所預(yù)期的功能,所述元件與用于執(zhí)行所述軟件 的合適電路協(xié)作。由權(quán)利要求所限定的本發(fā)明包括用于執(zhí)行具體功能的各種部件,并且在 權(quán)利要求所請(qǐng)求的方法中,所述部件彼此連接。因此,可提供所述功能的任何部件應(yīng)該被理 解為是從本說明書中料想到的內(nèi)容的等效物。根據(jù)在下文中陳述的、參考附圖進(jìn)行的如下實(shí)施例描述,本發(fā)明的其它目的和方 面將變得明顯。如果確定關(guān)于相關(guān)技術(shù)的進(jìn)一步詳細(xì)描述使本發(fā)明的要點(diǎn)模糊,則這里將 不提供所述描述。下文中,將參考圖來描述本發(fā)明的特定實(shí)施例。本發(fā)明涉及多對(duì)象音頻編碼和解碼技術(shù)。多對(duì)象音頻可包括用于構(gòu)建音頻內(nèi)容的 多個(gè)音頻對(duì)象。例如,如果音頻內(nèi)容包括伴奏或背景音樂以及演唱(vocal),則伴奏或背景 音樂是一個(gè)音頻對(duì)象,而演唱是另一音頻對(duì)象。伴奏或背景音樂的音頻對(duì)象可以被細(xì)分為 樂器(諸如,鋼琴或鼓)的音頻對(duì)象。多對(duì)象音頻編碼是用于壓縮不同的音頻對(duì)象的技術(shù), 并且多對(duì)象音頻解碼是用于對(duì)編碼的多對(duì)象音頻進(jìn)行解碼的技術(shù)。因此,多對(duì)象音頻編碼 和解碼技術(shù)通過根據(jù)對(duì)象而對(duì)多個(gè)音頻對(duì)象進(jìn)行編碼和解碼來使得能夠向用戶提供多樣 的主動(dòng)音頻服務(wù)。也就是說,多對(duì)象音頻編碼和解碼技術(shù)不僅使得用戶能夠單獨(dú)控制每個(gè) 音頻對(duì)象,而且還使得可能通過組合多個(gè)音頻對(duì)象來創(chuàng)建多樣的音頻服務(wù)和內(nèi)容。在本發(fā)明中,殘余信號(hào)可用于對(duì)多對(duì)象音頻進(jìn)行編碼和解碼。殘余信號(hào)表示預(yù)定 信號(hào)在估計(jì)之前和之后的差別。所述殘余信號(hào)可定義為等式1。X(t)-X' (t) = Xresidual (t)等式 1在等式1中,X(t)指示在估計(jì)之前的原始信號(hào),而X' (t)指示在估計(jì)之后的估計(jì) 信號(hào)。Residual (t)指示在原始信號(hào)和估計(jì)信號(hào)之間的差。將如下描述使用殘余信號(hào)進(jìn)行的多對(duì)象音頻編碼。例如,在多對(duì)象音頻包括第一 音頻對(duì)象和第二音頻對(duì)象的情況下,通過對(duì)第一音頻對(duì)象和第二音頻對(duì)象進(jìn)行下混合來生 成下混合信號(hào)。第一音頻對(duì)象和第二音頻對(duì)象可估計(jì)為第一估計(jì)音頻對(duì)象和第二估計(jì)音頻 對(duì)象。這里,第一音頻對(duì)象和第二音頻對(duì)象是原始信號(hào),而第一估計(jì)音頻對(duì)象和第二估計(jì)音 頻對(duì)象是估計(jì)的信號(hào)。殘余信號(hào)可使用原始信號(hào)和估計(jì)信號(hào)來生成。因此,在根據(jù)本發(fā)明 的示范實(shí)施例的多對(duì)象音頻編碼中,可通過對(duì)第一和第二音頻對(duì)象進(jìn)行下混合來生成下混 合信號(hào)和殘余信號(hào)。在根據(jù)本發(fā)明的示范實(shí)施例的多對(duì)象音頻解碼中,執(zhí)行多對(duì)象音頻編 碼的逆處理。也就是說,使用下混合信號(hào)和殘余信號(hào)來恢復(fù)第一音頻對(duì)象和第二音頻對(duì)象。根據(jù)本發(fā)明實(shí)施例的多對(duì)象編碼方法包括通過對(duì)前景音頻對(duì)象和背景音頻對(duì)象 進(jìn)行下混合來生成下混合信號(hào)和殘余信號(hào);以及生成包括下混合信號(hào)和殘余信號(hào)的比特 流。前景音頻對(duì)象可包括第一前景音頻對(duì)象和第二前景音頻對(duì)象。所述生成下混合信號(hào) 和殘余信號(hào)的步驟可包括通過對(duì)背景音頻對(duì)象和第一前景音頻對(duì)象進(jìn)行下混合來生成第 一下混合信號(hào)和第一殘余信號(hào);以及通過對(duì)第一下混合信號(hào)和第二前景音頻對(duì)象進(jìn)行下混 合來生成第二下混合信號(hào)和第二殘余信號(hào)。所述生成下混合信號(hào)和殘余信號(hào)的步驟還可包 括旁路第二前景音頻對(duì)象。根據(jù)本發(fā)明實(shí)施例的多對(duì)象音頻編碼設(shè)備包括下混合發(fā)生器,用于通過對(duì)前景 音頻對(duì)象和背景音頻對(duì)象進(jìn)行下混合來生成下混合信號(hào)和殘余信號(hào),并生成包括下混合信 號(hào)和殘余信號(hào)的比特流。前景音頻對(duì)象可包括第一前景音頻對(duì)象和第二前景音頻對(duì)象。下 混合發(fā)生器包括第一下混合發(fā)生器,用于通過對(duì)背景音頻對(duì)象和第一前景音頻對(duì)象進(jìn)行下混合來生成第一下混合信號(hào)和第一殘余信號(hào);以及第二下混合發(fā)生器,用于通過對(duì)第一 下混合信號(hào)和第二前景音頻對(duì)象進(jìn)行下混合來生成第二下混合信號(hào)和第二殘余信號(hào)。第一 下混合發(fā)生器可旁路第二前景音頻對(duì)象。根據(jù)本發(fā)明實(shí)施例的多對(duì)象音頻解碼方法包括接收比特流,該比特流包括通過 對(duì)前景音頻對(duì)象和背景音頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)、和在下混合之后剩下的 殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)前景音頻對(duì)象和背景音頻對(duì)象。前景 音頻對(duì)象可包括第一前景音頻對(duì)象和第二前景音頻對(duì)象,而殘余信號(hào)可包括用于第一前景 音頻對(duì)象的第一殘余信號(hào)和用于第二前景音頻對(duì)象的第二殘余信號(hào)。所述恢復(fù)前景音頻對(duì) 象和背景音頻對(duì)象的步驟可包括使用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一前景音頻對(duì) 象;以及使用在恢復(fù)第一前景音頻對(duì)象之后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二前景 音頻對(duì)象。根據(jù)本發(fā)明實(shí)施例的多對(duì)象音頻解碼設(shè)備包括接收器,用于接收比特流,該比特 流包括通過對(duì)前景音頻對(duì)象和背景音頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)、和在生成下 混合信號(hào)之后剩下的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)前 景音頻對(duì)象和背景音頻對(duì)象。前景音頻對(duì)象可包括第一前景音頻對(duì)象和第二前景音頻對(duì) 象,而殘余信號(hào)可包括用于第一前景音頻對(duì)象的第一殘余信號(hào)和用于第二前景音頻對(duì)象的 第二殘余信號(hào)。所述恢復(fù)器可包括第一恢復(fù)器,用于使用下混合信號(hào)和第一殘余信號(hào)來恢 復(fù)第一前景音頻對(duì)象;以及第二恢復(fù)器,用于使用在恢復(fù)第一前景音頻對(duì)象之后的下混合 信號(hào)和第二殘余信號(hào)來恢復(fù)第二前景音頻對(duì)象。音頻對(duì)象包括具有單聲道信號(hào)的單聲道音頻對(duì)象和具有立體聲信號(hào)的立體聲音 頻對(duì)象。立體聲音頻對(duì)象可包括左聲道信號(hào)和右聲道信號(hào)。背景音頻對(duì)象可以是通過將立體聲音頻對(duì)象下混合到單聲道音頻對(duì)象上而生成 的下混合音頻對(duì)象?;蛘弑尘耙纛l對(duì)象可以是通過將單聲道音頻對(duì)象下混合到立體聲音頻 對(duì)象上而生成的下混合音頻對(duì)象。因此,背景音頻對(duì)象可以是通過將多個(gè)單聲道音頻對(duì)象 下混合到立體聲音頻對(duì)象上或通過將多個(gè)立體聲音頻對(duì)象下混合到單聲道音頻對(duì)象上而 生成的下混合對(duì)象。相應(yīng)地,在這個(gè)情況下,多對(duì)象音頻可包括多個(gè)背景音頻對(duì)象。此外, 背景音頻對(duì)象可以是通過將多個(gè)單聲道音頻對(duì)象或多個(gè)立體聲音頻對(duì)象下混合到一個(gè)立 體聲音頻對(duì)象上而生成的下混合對(duì)象。相應(yīng)地,在這個(gè)情況下,多對(duì)象音頻可包括多個(gè)背景 音頻對(duì)象。像背景音頻對(duì)象一樣,前景音頻對(duì)象可以是通過將立體聲音頻對(duì)象下混合到單 聲道音頻對(duì)象上而生成的或通過將單聲道音頻對(duì)象下混合到立體聲音頻對(duì)象上而生成的 下混合對(duì)象。根據(jù)本發(fā)明實(shí)施例的多對(duì)象音頻編碼和解碼技術(shù)使得能夠通過使用殘余信號(hào)來 對(duì)多對(duì)象音頻進(jìn)行編碼或解碼來主動(dòng)地控制音頻對(duì)象。此外,根據(jù)本發(fā)明實(shí)施例的多對(duì)象 音頻編碼和解碼技術(shù)可有效地對(duì)包括單聲道和立體聲音頻對(duì)象的多對(duì)象音頻進(jìn)行編碼和 解碼。下文中,將描述包括前景音頻對(duì)象和背景音頻對(duì)象的多對(duì)象音頻。前景音頻對(duì)象 表示要控制的目標(biāo)音頻對(duì)象。然而,前景音頻對(duì)象可以利用背景音頻對(duì)象來替換。此外,前 景音頻對(duì)象和背景音頻對(duì)象可包括多個(gè)音頻對(duì)象。圖1是用于描述本發(fā)明的第一構(gòu)思的圖。參考圖1,前景音頻對(duì)象reo和背景音頻對(duì)象BGO被輸入到下混合發(fā)生器101。在圖1中,前景音頻對(duì)象reo包括第一前景音頻對(duì)象 FGOl和第二前景音頻對(duì)象re02。首先,背景音頻對(duì)象BGO和第一前景音頻對(duì)象被輸入第一下混合發(fā)生器103。 第一下混合發(fā)生器103通過對(duì)背景音頻對(duì)象BGO和第一前景音頻對(duì)象reoi進(jìn)行下混合來 生成第一下混合信號(hào)和第一殘余信號(hào)。第二下混合發(fā)生器105接收第一下混合信號(hào)和第二前景音頻對(duì)象陽(yáng)02。第二下混 合發(fā)生器105通過對(duì)第一下混合信號(hào)和第二前景音頻對(duì)象re02進(jìn)行下混合來生成第二下 混合信號(hào)DMX和第二殘余信號(hào)。在圖ι中,輸入前景音頻對(duì)象reoi和reo2。然而,對(duì)于本領(lǐng)域技術(shù)人員顯然的是, 可以輸入多于三個(gè)前景音頻對(duì)象。如果輸入多于三個(gè)前景音頻對(duì)象,則第一和第二下混合 發(fā)生器103和104級(jí)聯(lián)連接為增加得與所增加的前景音頻對(duì)象的數(shù)目一樣多。除了殘余信號(hào)之外,第一和第二下混合發(fā)生器103和105接收兩個(gè)信號(hào)并輸出一 個(gè)下混合信號(hào)。例如,第一下混合發(fā)生器103接收背景音頻對(duì)象BGO和第一前景音頻對(duì)象 reoi并輸出第一下混合信號(hào)。因此,第一下混合發(fā)生器103具有逆一到二(Inverse One To Two) (OTT-I)結(jié)構(gòu),該結(jié)構(gòu)具有兩個(gè)輸入和一個(gè)輸出。這里,鑒于編碼來定義0TT-1。鑒 于解碼,0TT-1可等效于一到二(OTT)。如果它們被擴(kuò)展到包括第一下混合發(fā)生器103和第 二下混合發(fā)生器105的下混合發(fā)生器101,并且如果輸入多于三個(gè)前景音頻對(duì)象reo,則它 可具有逆一到N(OTN-I)結(jié)構(gòu),該結(jié)構(gòu)具有多個(gè)輸入N和一個(gè)輸出。這里,鑒于編碼來定義 0TN-1結(jié)構(gòu)。鑒于解碼,0TN-1結(jié)構(gòu)可等效于一到N(OTN)結(jié)構(gòu)。按照上述編碼處理的逆順 序來執(zhí)行解碼處理。圖2是用于描述本發(fā)明的第二構(gòu)思的圖。參考圖2,總體結(jié)構(gòu)類似于圖1所示的結(jié) 構(gòu)。然而,第一下混合發(fā)生器203旁路第二前景對(duì)象re02,并且第二下混合發(fā)生器205將第 二前景音頻對(duì)象reo2下混合到通過對(duì)背景音頻對(duì)象BGO和第一前景音頻對(duì)象reoi進(jìn)行下 混合而生成的下混合信號(hào)上。除了殘余信號(hào)之外,第一下混合發(fā)生器230或第二下混合發(fā)生器205接收三個(gè)信 號(hào)并輸出兩個(gè)信號(hào)。這兩個(gè)輸出信號(hào)是下混合信號(hào)和旁路信號(hào)。例如,第一下混合發(fā)生器 203接收背景音頻對(duì)象BG0、第一前景音頻對(duì)象reoi、和第二前景音頻對(duì)象re02,并輸出第 一下混合信號(hào)和第二前景音頻對(duì)象reo2。因此,第一下混合發(fā)生器具有逆二到三(TTT-I), 其具有三個(gè)輸入和兩個(gè)輸出。然而,三個(gè)輸入之一被沒有修改地輸出。因此,這樣的結(jié)構(gòu)被 稱為平凡(trivial)TTT-I (tTTT-1)。這里,鑒于編碼來定義tTTT_l。鑒于解碼,它可等效 于平凡二到三(tTTT)。如果它們被擴(kuò)展到包括第一下混合發(fā)生器203和第二下混合發(fā)生器 205的下混合發(fā)生器201,并且如果多于三個(gè)前景音頻對(duì)象被輸入,則它可具有逆平凡二到 N(tTTN-l)結(jié)構(gòu),其具有兩個(gè)輸出。這里,鑒于編碼來定義tTTT-Ι結(jié)構(gòu)。鑒于解碼,它可等 效于平凡二到N(tTTN)。圖3是圖示了圖2中所示的第一下混合發(fā)生器203的圖。參考圖3,第一下混合 發(fā)生器203接收三個(gè)輸入信號(hào)“輸入1” (Input 1)、“輸入2” (Input2)和“輸入3” (Input 3),并輸出兩個(gè)信號(hào)“輸出1” (Output 1)和“輸出2” (Output 2)。第一下混合發(fā)生器301通過下混合第一輸入信號(hào)“輸入1”和第二輸入信號(hào)“輸入 2”來輸出第一輸出信號(hào)“輸出1”作為下混合信號(hào),并生成殘余信號(hào)。第一下混合發(fā)生器301按照原樣旁路第三輸入信號(hào),并輸出旁路的信號(hào)作為第二輸出信號(hào)“輸出2”。因此,第 一輸出信號(hào)“輸出1”是通過下混合第一輸入信號(hào)“輸入1”和第二輸入信號(hào)“輸入2”而生 成的下混合信號(hào)。這里,第二輸出信號(hào)“輸出2”變成第三輸入信號(hào)“輸入3”的相同信號(hào)。上面的描述可同樣地應(yīng)用于本發(fā)明的各個(gè)實(shí)施例。下文中,將參考圖來詳細(xì)地描 述本發(fā)明的實(shí)施例。<第一實(shí)施例單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象>在本發(fā)明的第一實(shí)施例中,前景音頻對(duì)象包括單聲道前景音頻對(duì)象,而背景音頻 對(duì)象包括單聲道背景音頻對(duì)象。根據(jù)本發(fā)明的第一實(shí)施例的多對(duì)象音頻編碼方法包括通過將單聲道前景音頻對(duì) 象下混合到單聲道背景音頻對(duì)象上來生成下混合信號(hào)和殘余信號(hào),以及生成包括下混合信 號(hào)和殘余信號(hào)的比特流。單聲道前景音頻對(duì)象可包括第一單聲道前景音頻對(duì)象和第二單聲 道前景音頻對(duì)象。所述生成下混合信號(hào)和殘余信號(hào)的步驟可包括通過下混合單聲道背景 音頻對(duì)象和第一單聲道前景音頻對(duì)象來生成第一下混合信號(hào)和第一殘余信號(hào),并且通過下 混合第一下混合信號(hào)和第二單聲道前景音頻對(duì)象來生成第二下混合信號(hào)和第二殘余信號(hào)。 所述生成下混合信號(hào)和殘余信號(hào)的步驟還可包括旁路第二單聲道前景音頻對(duì)象。根據(jù)第一實(shí)施例的多對(duì)象音頻編碼設(shè)備包括下混合發(fā)生器,用于通過下混合單 聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào);以及比特流發(fā)生 器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。單聲道前景音頻對(duì)象可包括第一單聲 道前景音頻對(duì)象和第二單聲道前景音頻對(duì)象。下混合發(fā)生器可包括第一下混合發(fā)生器,用 于通過下混合單聲道背景音頻對(duì)象和第一單聲道前景音頻對(duì)象來生成第一下混合信號(hào)和 第一殘余信號(hào);以及第二下混合發(fā)生器,用于通過下混合第一下混合信號(hào)和第二單聲道前 景音頻對(duì)象來生成第二下混合信號(hào)和第二殘余信號(hào)。第一下混合發(fā)生器可旁路第二單聲道 前景音頻對(duì)象。根據(jù)本發(fā)明的第一實(shí)施例的多對(duì)象音頻解碼方法包括接收比特流,該比特流包 括通過對(duì)單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)和 在下混合之后剩下的殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)前景音頻對(duì)象和 背景音頻對(duì)象。單聲道前景音頻對(duì)象可包括第一單聲道前景音頻對(duì)象和第二單聲道前景音 頻對(duì)象。殘余信號(hào)可包括用于第一單聲道前景音頻對(duì)象的第一殘余信號(hào)和用于第二單聲道 前景音頻對(duì)象的第二殘余信號(hào)。所述恢復(fù)前景音頻對(duì)象和背景音頻對(duì)象的步驟可包括使 用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一單聲道前景音頻對(duì)象;以及使用在恢復(fù)第一單聲 道前景音頻對(duì)象之后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二單聲道前景音頻對(duì)象。根據(jù)第一實(shí)施例的多對(duì)象音頻解碼設(shè)備包括接收器,用于接收比特流,該比特流 包括通過對(duì)單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)、 和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信號(hào)中 恢復(fù)單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象。單聲道前景音頻對(duì)象可包括第一單聲道 前景音頻對(duì)象和第二單聲道前景音頻對(duì)象。殘余信號(hào)可包括用于第一單聲道前景音頻對(duì)象 的第一殘余信號(hào)和用于第二單聲道前景音頻對(duì)象的第二殘余信號(hào)。所述恢復(fù)器可包括第 一恢復(fù)器,用于使用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一單聲道前景音頻對(duì)象;以及第 二恢復(fù)器,用于使用在恢復(fù)第一單聲道前景音頻對(duì)象之后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二單聲道前景音頻對(duì)象。圖4是用于描述本發(fā)明的第一實(shí)施例的圖。參考圖4,前景音頻對(duì)象TOO和背 景音頻對(duì)象是單聲道信號(hào)。單聲道前景音頻對(duì)象“單聲道reor’(MonoreOl)和“單聲道 FG02" (Mono FG02)以及單聲道背景音頻對(duì)象“單聲道BGO”(Mono BG0)被輸入到下混合發(fā) 生器401。第一下混合發(fā)生器403接收單聲道背景音頻對(duì)象“單聲道BG0”和第一單聲道前景 音頻對(duì)象“單聲道reor’,并生成第一下混合信號(hào)和第一殘余信號(hào)。第二下混合發(fā)生器405 接收第一下混合信號(hào)和第二單聲道前景音頻對(duì)象“單聲道reo2”,并生成下混合信號(hào)DMX和 第二殘余信號(hào)。在圖4中,輸入兩個(gè)單聲道音頻對(duì)象“單聲道reoi”和“單聲道re02”。然而,對(duì)于 本領(lǐng)域技術(shù)人員明顯的是,可輸入多于三個(gè)單聲道音頻對(duì)象。如果輸入多于三個(gè)單聲道音 頻對(duì)象,則第一下混合發(fā)生器403和第二下混合發(fā)生器404級(jí)聯(lián)連接為在數(shù)目上增加得與 所增加的前景音頻對(duì)象的數(shù)目一樣多。如果輸入多于三個(gè)前景音頻對(duì)象reo,它可具有逆一到N(OTN-I)結(jié)構(gòu),該結(jié)構(gòu)具 有多個(gè)輸入N和一個(gè)輸出。這里,鑒于編碼來定義0TN-1。鑒于解碼,0TN-1結(jié)構(gòu)可等效于 一到N(OTN)結(jié)構(gòu)。按照上述編碼處理的逆順序來執(zhí)行解碼處理。<第二實(shí)施例立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象>在本發(fā)明的第二實(shí)施例中,前景對(duì)象包括立體聲前景音頻對(duì)象,而背景音頻對(duì)象 包括單聲道背景音頻對(duì)象。根據(jù)本發(fā)明的第二實(shí)施例的多對(duì)象編碼方法包括通過下混合立體聲前景音頻對(duì) 象和單聲道背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào),以及生成包括下混合信號(hào)和殘余 信號(hào)的比特流。立體聲前景音頻對(duì)象可包括第一信號(hào)和第二信號(hào)。所述生成下混合信號(hào)和 殘余信號(hào)的步驟可包括通過下混合單聲道子音頻對(duì)象和第一信號(hào)來生成第一下混合信號(hào) 和第一殘余信號(hào),以及通過下混合第一下混合信號(hào)和第二信號(hào)來生成第二下混合信號(hào)和第 二殘余信號(hào)。所述生成下混合信號(hào)和殘余信號(hào)的步驟還可包括旁路第二信號(hào)。根據(jù)第二實(shí)施例的多對(duì)象音頻編碼設(shè)備包括下混合發(fā)生器,用于通過下混合立 體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào);以及比特流發(fā)生 器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。立體聲前景音頻對(duì)象可包括第一信號(hào) 和第二信號(hào)。下混合發(fā)生器可包括第一下混合發(fā)生器,用于通過下混合單聲道子音頻對(duì)象 和第一信號(hào)來生成第一下混合信號(hào)和第一殘余信號(hào);以及第二下混合發(fā)生器,用于通過下 混合第一下混合信號(hào)和第二信號(hào)來生成第二下混合信號(hào)和第二殘余信號(hào)。第一下混合發(fā)生 器可旁路第二信號(hào)。根據(jù)本發(fā)明的第二實(shí)施例的多對(duì)象音頻解碼方法包括接收通過對(duì)立體聲前景音 頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)和在下混合之后剩下的殘 余信號(hào);以及使用殘余信號(hào)來恢復(fù)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象。立體聲前 景音頻對(duì)象可包括第一信號(hào)和第二信號(hào)。殘余信號(hào)可包括用于第一信號(hào)的第一殘余信號(hào)和 用于第二信號(hào)的第二殘余信號(hào)。所述恢復(fù)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象的步 驟可包括使用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一信號(hào);以及使用在恢復(fù)第一信號(hào)之 后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二信號(hào)。
根據(jù)第二實(shí)施例的多對(duì)象音頻解碼設(shè)備包括接收器,用于接收比特流,該比特流 包括通過對(duì)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)、 和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信號(hào)中 恢復(fù)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象。這里,立體聲前景音頻對(duì)象可包括第一 信號(hào)和第二信號(hào)。殘余信號(hào)可包括用于第一信號(hào)的第一殘余信號(hào)和用于第二信號(hào)的第二殘 余信號(hào)。所述恢復(fù)器可包括第一恢復(fù)器,用于使用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一 信號(hào);以及第二恢復(fù)器,用于使用在恢復(fù)第一信號(hào)之后的下混合信號(hào)和第二殘余信號(hào)來恢 復(fù)第二信號(hào)。圖5是用于描述本發(fā)明的第二實(shí)施例的圖。參考圖5,下混合發(fā)生器501接收單聲 道背景音頻對(duì)象“單聲道BG0”和立體聲前景音頻對(duì)象“立體聲左/右reo” (Stereo Left/ Right FGO)。立體聲前景音頻對(duì)象“立體聲左/右TOO”包括左聲道信號(hào)“左TOO” (Left FG0)和右聲道信號(hào)“右TOO” (RightFGO)。第一下混合發(fā)生器503接收單聲道背景音頻對(duì)象“單聲道BG0”和左聲道信號(hào)“左 FG0",并生成第一下混合信號(hào)和第一殘余信號(hào)。第二下混合發(fā)生器505接收第一下混合信 號(hào)和右聲道信號(hào)“右reo”,并生成第二下混合信號(hào)DMX和第二殘余信號(hào)。在圖5中,輸入一個(gè)立體聲前景音頻對(duì)象“立體聲左/右reo”。然而,對(duì)于本領(lǐng)域 技術(shù)人員明顯的是,可輸入多于兩個(gè)立體聲前景音頻對(duì)象。如果輸入多于兩個(gè)立體聲前景 音頻對(duì)象,則第一下混合發(fā)生器503和第二下混合發(fā)生器505級(jí)聯(lián)連接為增加得與所增加 的立體聲前景音頻對(duì)象的數(shù)目一樣多。按照上述編碼處理的逆順序來執(zhí)行解碼處理。<第三實(shí)施例立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象>在本發(fā)明的第三實(shí)施例中,前景對(duì)象包括立體聲前景音頻對(duì)象,而背景音頻對(duì)象 包括立體聲背景音頻對(duì)象。立體聲音頻對(duì)象可包括左聲道信號(hào)和右聲道信號(hào)。根據(jù)本發(fā)明的第三實(shí)施例的多對(duì)象音頻編碼方法包括通過下混合立體聲前景音 頻對(duì)象和立體聲背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào),以及生成包括下混合信號(hào)和 殘余信號(hào)的比特流。立體聲前景音頻對(duì)象和立體聲背景音頻信號(hào)的每一個(gè)可包括第一信號(hào) 和第二信號(hào)。所述生成下混合信號(hào)和殘余信號(hào)的步驟可包括通過下混合立體聲前景音頻 對(duì)象和立體聲背景音頻信號(hào)的第一信號(hào)來生成第一下混合信號(hào)和第一殘余信號(hào),以及通過 下混合立體聲前景音頻對(duì)象和立體聲背景音頻信號(hào)的第二信號(hào)來生成第二下混合信號(hào)和 第二殘余信號(hào)。立體聲前景音頻對(duì)象的第一信號(hào)可包括第一左聲道信號(hào)和第二左聲道信 號(hào)。所述生成第一下混合信號(hào)和第一殘余信號(hào)的步驟可包括通過下混合立體聲背景音頻 對(duì)象的第一信號(hào)和第一左聲道信號(hào)來生成第一左聲道下混合信號(hào)和第一左聲道殘余信號(hào); 以及通過下混合第一左聲道下混合信號(hào)和第二左聲道信號(hào)來生成第二左聲道下混合信號(hào) 和第二左聲道殘余信號(hào)。所述生成第一下混合信號(hào)和第一殘余信號(hào)的步驟還可包括旁路 第二左聲道信號(hào)。根據(jù)本發(fā)明的第三實(shí)施例的多對(duì)象音頻編碼設(shè)備包括下混合發(fā)生器,用于通過 下混合立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào);以及比 特流發(fā)生器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。立體聲前景音頻對(duì)象和立體 聲背景音頻信號(hào)的每一個(gè)可包括第一信號(hào)和第二信號(hào)。下混合發(fā)生器可包括第一下混合 發(fā)生器,用于通過下混合立體聲前景音頻對(duì)象和立體聲背景音頻信號(hào)的第一信號(hào)來生成第一下混合信號(hào)和第一殘余信號(hào);以及第二下混合發(fā)生器,用于通過下混合立體聲前景音頻 對(duì)象和立體聲背景音頻信號(hào)的第二信號(hào)來生成第二下混合信號(hào)和第二殘余信號(hào)。立體聲前 景音頻對(duì)象的第一信號(hào)可包括第一左聲道信號(hào)和第二左聲道信號(hào)。第一下混合發(fā)生器可包 括第一左聲道下混合發(fā)生器,用于通過下混合立體聲背景音頻對(duì)象的第一信號(hào)和第一左 聲道信號(hào)來生成第一左聲道下混合信號(hào)和第一左聲道殘余信號(hào);以及第二左聲道下混合發(fā) 生器,用于通過下混合第一左聲道下混合信號(hào)和第二左聲道信號(hào)來生成第二左聲道下混合 信號(hào)和第二左聲道殘余信號(hào)。第一下混合發(fā)生器可旁路第二左聲道信號(hào)。根據(jù)本發(fā)明的第三實(shí)施例的多對(duì)象音頻解碼方法包括接收比特流,該比特流包 括通過對(duì)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象進(jìn)行下混合而獲得的下混合信號(hào)、和 根據(jù)下混合信號(hào)的殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)立體聲前景音頻對(duì) 象和立體聲背景音頻對(duì)象。立體聲前景音頻對(duì)象和立體聲背景音頻信號(hào)的每一個(gè)可包括第 一信號(hào)和第二信號(hào)。殘余信號(hào)可包括用于第一信號(hào)的第一殘余信號(hào)和用于第二信號(hào)的第二 殘余信號(hào)。所述恢復(fù)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象的步驟可包括使用下混 合信號(hào)和第一殘余信號(hào)來恢復(fù)第一信號(hào);以及使用下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二 信號(hào)。立體聲前景音頻對(duì)象的第一信號(hào)可包括第一左聲道信號(hào)和第二左聲道信號(hào)。所述第 一殘余信號(hào)包括用于第一左聲道信號(hào)的第一左聲道殘余信號(hào)和用于第二左聲道信號(hào)的第 二左聲道殘余信號(hào)。所述恢復(fù)第一信號(hào)的步驟包括使用下混合信號(hào)和第一左聲道殘余信 號(hào)來恢復(fù)第一左聲道信號(hào);以及使用在恢復(fù)第一左聲道信號(hào)之后的下混合信號(hào)和第二左聲 道信號(hào)來恢復(fù)第二左聲道信號(hào)。根據(jù)本發(fā)明的第三實(shí)施例的多對(duì)象音頻解碼設(shè)備包括接收器,用于接收比特流, 該比特流包括通過對(duì)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象進(jìn)行下混合來生成的下 混合信號(hào)、和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混 合信號(hào)中恢復(fù)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象。立體聲前景音頻對(duì)象和立體聲 背景音頻信號(hào)的每一個(gè)可包括第一信號(hào)和第二信號(hào)。殘余信號(hào)可包括用于第一信號(hào)的第一 殘余信號(hào)和用于第二信號(hào)的第二殘余信號(hào)。所述恢復(fù)器可包括第一恢復(fù)器,用于使用下混 合信號(hào)和第一殘余信號(hào)來恢復(fù)第一信號(hào);以及第二恢復(fù)器,用于使用下混合信號(hào)和第二殘 余信號(hào)來恢復(fù)第二信號(hào)。立體聲前景音頻對(duì)象的第一信號(hào)可包括第一左聲道信號(hào)和第二左 聲道信號(hào)。所述第一殘余信號(hào)包括用于第一左聲道信號(hào)的第一左聲道殘余信號(hào)和用于第二 左聲道信號(hào)的第二左聲道殘余信號(hào)。第一恢復(fù)器可包括第一左聲道恢復(fù)器,用于使用下混 合信號(hào)和第一左聲道殘余信號(hào)來恢復(fù)第一左聲道信號(hào);以及第二左聲道恢復(fù)器,用于使用 在恢復(fù)第一左聲道信號(hào)之后的下混合信號(hào)和第二左聲道信號(hào)來恢復(fù)第二左聲道信號(hào)。圖6是用于描述本發(fā)明的第三實(shí)施例的圖。參考圖6,前景音頻對(duì)象“立體聲左/ 右reo”是立體聲信號(hào),而背景音頻對(duì)象“立體聲左/右BGO” (StereoLeft/Right BG0)是 立體聲信號(hào)。將參考圖6來描述兩個(gè)立體聲前景音頻對(duì)象“立體聲左/右reoi”和“立體 聲左/右reo2”。下混合發(fā)生器601接收立體聲背景音頻對(duì)象“立體聲左/右BG0”和兩個(gè)立體聲前 景音頻對(duì)象“立體聲左/右reoi,,和“立體聲左/右reo2”。第一左聲道下混合發(fā)生器603接收左聲道背景音頻對(duì)象“左BGO” (LeftBGO)和第
一左聲道前景音頻對(duì)象“左reor’,并生成第一左聲道下混合信號(hào)和第一左聲道殘余信號(hào)“左殘余”(Left Residual) 0第二左聲道下混合發(fā)生器605接收第一左聲道下混合信號(hào)和 第二左聲道前景音頻對(duì)象“左陽(yáng)02”,并生成第二左聲道下混合信號(hào)“左DMX”(Left DMX)和 第二左聲道殘余信號(hào)“左殘余”。還通過上述的處理來下混合右聲道背景音頻對(duì)象“右BGO” (RightBGO)和右聲道 前景音頻對(duì)象“右reoi”和“右reo2”。在圖6中,輸入兩個(gè)立體聲前景音頻對(duì)象“立體聲左/右reo”。然而,對(duì)于本領(lǐng)域 技術(shù)人員明顯的是,可輸入多于三個(gè)立體聲前景音頻對(duì)象。如果輸入多于三個(gè)立體聲前景 音頻對(duì)象,則第一左聲道下混合發(fā)生器603和第二下左聲道混合發(fā)生器605級(jí)聯(lián)連接為增 加得與所增加的前景音頻對(duì)象的數(shù)目一樣多。按照上述編碼處理的逆順序來執(zhí)行解碼處理。在圖6中,第一左聲道下混合發(fā)生器603接收左聲道背景音頻對(duì)象“左BGO”、第一 左聲道前景音頻對(duì)象“左reor’、以及第二左聲道前景音頻對(duì)象“左reo2”,并且第一左聲道 下混合發(fā)生器603旁路第二左聲道前景音頻對(duì)象“左FG02”。也就是說,第一左聲道下混合 發(fā)生器具有逆二到三(TTT-I),其具有三個(gè)輸入和兩個(gè)輸出。這個(gè)結(jié)構(gòu)被稱作如上所述的 平凡TTT-Iατττ-1)結(jié)構(gòu)。此外,輸入包括左聲道信號(hào)和右聲道信號(hào)的多于三個(gè)立體聲前 景音頻對(duì)象,它具有逆平凡二到N(tTTN-l)結(jié)構(gòu),該結(jié)構(gòu)具有多于三個(gè)輸入和兩個(gè)輸出。這 里,鑒于編碼來定義tTTN-Ι結(jié)構(gòu),并且鑒于解碼,它可等效于平凡二到N(tTTN)結(jié)構(gòu)。<第四實(shí)施例立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象>在本發(fā)明的第四實(shí)施例中,前景對(duì)象包括立體聲前景音頻對(duì)象,并且背景音頻對(duì) 象包括單聲道背景音頻對(duì)象。立體聲音頻對(duì)象可包括左聲道信號(hào)和右聲道信號(hào)。在第四實(shí) 施例中,下混合輸出信號(hào)是立體聲信號(hào)。在這點(diǎn)上,第四實(shí)施例不同于第二實(shí)施例。根據(jù)本發(fā)明的第四實(shí)施例的多對(duì)象音頻編碼方法包括通過下混合立體聲前景音 頻對(duì)象和單聲道背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào),以及生成包括下混合信號(hào)和 殘余信號(hào)的比特流。立體聲前景音頻對(duì)象可包括第一和第二左聲道信號(hào)、以及第一和第二 右聲道信號(hào)。所述生成下混合信號(hào)和殘余信號(hào)的步驟可包括通過下混合單聲道背景音頻 對(duì)象、第一左聲道信號(hào)和第一右聲道信號(hào)來生成第一左聲道下混合信號(hào)、第一右聲道下混 合信號(hào)和第一殘余信號(hào);以及通過下混合第一左聲道下混合信號(hào)、第一右聲道下混合信號(hào)、 第二左聲道信號(hào)和第二右聲道信號(hào)來生成第二左聲道下混合信號(hào)、第二右聲道下混合信號(hào) 和第二殘余信號(hào)。這里,所述生成下混合信號(hào)和殘余信號(hào)的步驟還可包括旁路第二左聲道 信號(hào)和第二右聲道信號(hào)。根據(jù)本發(fā)明的第四實(shí)施例的多對(duì)象音頻編碼設(shè)備包括下混合發(fā)生器,用于通過 下混合立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào);以及比 特流發(fā)生器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。立體聲前景音頻對(duì)象可包括 第一和第二左聲道信號(hào)、以及第一和第二右聲道信號(hào)。下混合發(fā)生器可包括第一左聲道下 混合發(fā)生器,用于通過下混合單聲道背景音頻對(duì)象、第一左聲道信號(hào)和第一右聲道信號(hào)來 生成第一左聲道下混合信號(hào)、第一右聲道下混合信號(hào)和第一殘余信號(hào);以及第二左聲道下 混合發(fā)生器,用于通過下混合第一左聲道下混合信號(hào)、第一右聲道下混合信號(hào)、第二左聲道 信號(hào)和第二右聲道信號(hào)來生成第二左聲道下混合信號(hào)、第二右聲道下混合信號(hào)和第二殘余 信號(hào)。這里,下混合發(fā)生器可旁路第二左聲道信號(hào)和第二右聲道信號(hào)。
根據(jù)本發(fā)明的第四實(shí)施例的多對(duì)象音頻解碼方法包括接收比特流,該比特流包 括通過對(duì)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合而生成的下混合信號(hào)、和 根據(jù)下混合信號(hào)的殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)立體聲前景音頻對(duì) 象和單聲道背景音頻對(duì)象。立體聲前景音頻對(duì)象包括第一和第二左聲道信號(hào)、以及第一和 第二右聲道信號(hào)。殘余信號(hào)包括用于第一左和右聲道信號(hào)的第一殘余信號(hào)、以及用于第二 左和右聲道信號(hào)的第二殘余信號(hào)。所述恢復(fù)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象的 步驟包括使用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一左和右聲道信號(hào);以及使用在恢復(fù) 第一左和右聲道信號(hào)之后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二左和右聲道信號(hào)。根據(jù)第四實(shí)施例的多對(duì)象音頻解碼設(shè)備包括接收器,用于接收比特流,該比特流 包括通過對(duì)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)、 和根據(jù)下混合信號(hào)的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)立 體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象。立體聲前景音頻對(duì)象包括第一和第二左聲道信 號(hào)、以及第一和第二右聲道信號(hào)。殘余信號(hào)包括用于第一左和右聲道信號(hào)的第一殘余信號(hào)、 以及用于第二左和右聲道信號(hào)的第二殘余信號(hào)。所述恢復(fù)器包括第一恢復(fù)器,用于使用下 混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一左和右聲道信號(hào);以及第二恢復(fù)器,用于使用在恢復(fù) 第一左和右聲道信號(hào)之后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二左和右聲道信號(hào)。圖7是用于描述本發(fā)明的第四實(shí)施例的圖。參考圖7,前景音頻對(duì)象是立體聲信 號(hào),而背景音頻對(duì)象是單聲道信號(hào)。立體聲音頻對(duì)象可包括左聲道信號(hào)和右聲道信號(hào)。下 混合發(fā)生器701接收單聲道背景音頻對(duì)象“單聲道BG0”和立體聲前景音頻對(duì)象“reoi左/ 右”(FGO1 Left/Right)禾口 “FG02 左 / 右”(FG02 Left/Right)。第一下混合發(fā)生器702接收單聲道背景音頻對(duì)象“單聲道BGO”、和第一立體聲前 景音頻對(duì)象“reoi左”(reoi Left)和“reo2右”(reo2 Right),并通過下混合單聲道背景 音頻對(duì)象“單聲道BGO”、和第一立體聲前景音頻對(duì)象“reoi左”和“re02右”來生成第一下 混合信號(hào)和第一殘余信號(hào)。第一下混合信號(hào)可包括第一左聲道下混合信號(hào)和第二右聲道下 混合信號(hào)。通過下混合第一下混合信號(hào)、和第二立體聲前景音頻對(duì)象“reo2左”(re02Left) 和“re02右”來生成第二下混合信號(hào)和第二殘余信號(hào)。第二下混合信號(hào)可包括第二左聲道 下混合信號(hào)“左DMX”和第二右下混合信號(hào)“右DMX”(Right DMX)。第二左聲道下混合發(fā)生 器703a通過將第一左聲道下混合信號(hào)與第二立體聲左聲道前景音頻對(duì)象“re02左”下混合 來生成第二左聲道下混合信號(hào)“左DMX”。第二右聲道下混合發(fā)生器703b通過將第一右聲 道下混合信號(hào)與第二立體聲右聲道前景音頻對(duì)象“陽(yáng)02右”下混合來生成第二右聲道下混 合信號(hào)“右DMX”。圖8是用于描述根據(jù)本發(fā)明的實(shí)施例的解碼的圖。接收包括殘余信號(hào)和下混合信 號(hào)的比特流,并且恢復(fù)下混合信號(hào)。下混合信號(hào)可包括具有左聲道下混合信號(hào)“左DMX”和 右聲道下混合信號(hào)“右DMX”的立體聲下混合信號(hào)。單聲道前景音頻對(duì)象恢復(fù)器804使用立體聲下混合信號(hào)“左DMX”和“右DMX”以 及殘余信號(hào)“殘余”(Residual)來恢復(fù)單聲道前景對(duì)象“單聲道TOO” (Mono TOO)。單聲道 前景音頻對(duì)象恢復(fù)器804包括用于恢復(fù)單聲道前景音頻對(duì)象的每一個(gè)的第一單聲道前景 音頻對(duì)象恢復(fù)器802和第二單聲道前景音頻對(duì)象恢復(fù)器803。這里,第一單聲道前景音頻對(duì) 象恢復(fù)器802和第二單聲道前景音頻對(duì)象恢復(fù)器803具有TTT結(jié)構(gòu),并且單聲道前景音頻對(duì)象恢復(fù)器804具有TTN結(jié)構(gòu)。立體聲前景音頻對(duì)象恢復(fù)器806使用立體聲下混合信號(hào)“左DMX”和“右DMX”以及 殘余信號(hào)來恢復(fù)立體聲前景對(duì)象“立體聲左/右reo”。立體聲前景音頻對(duì)象“立體聲左/ 右reo”包括左聲道信號(hào)“左reo”和右聲道信號(hào)“右reo”。最終,輸出立體聲背景音頻對(duì)象
“左BGO”和“右BGO”。立體聲前景對(duì)象恢復(fù)器806包括多個(gè)對(duì)象恢復(fù)器805a、805b........
806a、806b、807a、和 807b。所述多個(gè)對(duì)象恢復(fù)器 805a,805b,......、806a、806b、807a、和
807b具有OTT結(jié)構(gòu)。立體聲前景立體聲對(duì)象恢復(fù)器806具有OTN結(jié)構(gòu)。圖8圖示了用于立體聲背景音頻對(duì)象和單聲道前景音頻對(duì)象的解碼設(shè)備。在立體 聲背景音頻對(duì)象和單聲道前景音頻對(duì)象的情況下,使用左聲道下混合信號(hào)“左DMX”和殘余 信號(hào)“殘余”來恢復(fù)單聲道背景音頻對(duì)象和單聲道前景音頻對(duì)象。其間,可通過立體聲前景 音頻對(duì)象恢復(fù)器806來恢復(fù)單聲道背景音頻對(duì)象和立體聲前景音頻對(duì)象。由于可容易地理 解其它解碼處理(如圖8所示),所以省略其詳細(xì)描述。下文中,將描述本發(fā)明的示范實(shí)施例。圖9是用于描述本發(fā)明的示范實(shí)施例的圖。參考圖9,多聲道背景場(chǎng)景對(duì)象(MBO)包括多個(gè)聲道“聲道1” (Channel 1)、“聲道 2” (Channel 2)、· · ·、“聲道 n” (Channel η)。MPEG 環(huán)繞編碼器(MPS) 901 對(duì) MBO 進(jìn)行編碼, 并輸出立體聲下混合信號(hào)“MBO左”(MBO Left)和“MBO右”(MBO Right)以及作為邊信息 (side information)的MPS比特流。這里,立體聲下混合信號(hào)“MB0左”和“MB0右”是背景
音頻對(duì)象。立體聲下混合信號(hào)“MB0左”和“MB0右”、立體聲前景對(duì)象“立體聲TOO” (Stereo reo)、和單聲道前景音頻對(duì)象“單聲道reo”被輸入到空間音頻對(duì)象編碼編碼器(sAoc)。立 體聲前景對(duì)象“立體聲r(shí)eo”和單聲道前景音頻對(duì)象“單聲道reo”是前景音頻對(duì)象。立體聲 前景音頻對(duì)象“立體聲r(shí)eo”可包括多個(gè)立體聲對(duì)象“對(duì)象1” (object 1)、“對(duì)象2” (object
2).....和“對(duì)象N” (object N),并且單聲道前景音頻對(duì)象“單聲道reo”可包括多個(gè)單聲
道對(duì)象“對(duì)象1”、“對(duì)象2”.....和“對(duì)象M” (object Μ)。第一下混合發(fā)生器903通過下混合立體聲下混合信號(hào)“ΜΒ0左”和“ΜΒ0右”以及 立體聲前景音頻對(duì)象“立體聲TOO”來生成立體聲下混合信號(hào)“左”(Left)和“右”(Right) 以及殘余信號(hào)。這里,第一下混合發(fā)生器903下混合立體聲前景音頻對(duì)象和立體聲背景音 頻對(duì)象。第一下混合發(fā)生器903等效于圖5中所示的立體聲下混合發(fā)生器505。第二下混合發(fā)生器904通過下混合立體聲下混合信號(hào)“左”和“右”以及單聲道前 景音頻對(duì)象“單聲道reo”來生成最終的下混合信號(hào)“左DMX”和“右DMX”以及殘余信號(hào)。 第二下混合發(fā)生器904等效于圖4中所示的下混合發(fā)生器401。SAOC編碼器902提取SAOC比特流。MPS比特流、SAOC比特流、殘余信號(hào)和最終的 下混合信號(hào)“左DMX”和“右DMX”被作為比特流而傳送到解碼器。由于解碼是編碼的逆操作,所以將省略其詳細(xì)描述。簡(jiǎn)言之,解碼器接收MPS比特 流、SAOC比特流、殘余信號(hào)、和最終下混合信號(hào)“左DMX”和“右DMX”。SAOC解碼器使用殘余 信號(hào)和最終下混合信號(hào)“左DMX”和“右DMX”來恢復(fù)前景音頻對(duì)象。MPS解碼器接收通過恢 復(fù)前景音頻對(duì)象而生成的最終下混合信號(hào)“左DMX”和“右DMX”以及MPS比特流。MPS解碼 器使用MPS比特流來恢復(fù)背景音頻對(duì)象的多聲道信號(hào)。
下文中,將描述殘余信號(hào)的生成??赏ㄟ^等式2來描述在解碼操作中生成使用下混合信號(hào)和殘余信號(hào)恢復(fù)的左聲 道信號(hào)和右聲道信號(hào)的處理。
等式2在等式2中,左邊的矩陣表示所恢復(fù)的左聲道信號(hào)和右聲道信號(hào)。在右邊的矩陣 中,M表示參數(shù)矩陣,m表示下混合信號(hào),而res表示殘余信號(hào)。如果M矩陣具有逆矩陣,則可通過等式3和等式4來獲得下混合信號(hào)m和殘余fi 號(hào) reso =,~等式 3 W=
r
Cn
c, -r
C1 +C2
C1+C2
,res =
C1 +C2
C1 +C2
等式4上述的本發(fā)明的方法可實(shí)現(xiàn)為程序并存儲(chǔ)在諸如⑶-ROM、RAM、ROM、軟盤、硬盤、磁 光盤等之類的計(jì)算機(jī)可讀記錄介質(zhì)中。由于本發(fā)明所屬領(lǐng)域的技術(shù)人員可容易地實(shí)現(xiàn)所述 處理,所以這里將不提供進(jìn)一步的描述。盡管已經(jīng)結(jié)合特定實(shí)施例而描述了本發(fā)明,但是對(duì)于本領(lǐng)域技術(shù)人員顯然的是, 可以進(jìn)行各種改變和修改,而不脫離在接下來的權(quán)利要求中限定的本發(fā)明的精神和范圍。工業(yè)可用性根據(jù)本發(fā)明的音頻編碼和解碼方法以及其設(shè)備可用于對(duì)音頻對(duì)象進(jìn)行編碼和解 碼。
權(quán)利要求
一種多對(duì)象編碼方法,包括通過下混合前景音頻對(duì)象和背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào);以及生成包括下混合信號(hào)和殘余信號(hào)的比特流。
2.根據(jù)權(quán)利要求1的多對(duì)象編碼方法,其中所述前景音頻對(duì)象包括第一前景音頻對(duì)象 和第二前景音頻對(duì)象,并且所述生成下混合信號(hào)和殘余信號(hào)的步驟包括通過下混合背景音頻對(duì)象和第一前景音頻對(duì)象來生成第一下混合信號(hào)和第一殘余信 號(hào);以及通過下混合第一下混合信號(hào)和第二前景音頻對(duì)象來生成第二下混合信號(hào)和第二殘余 信號(hào)。
3.根據(jù)權(quán)利要求2的多對(duì)象編碼方法,其中所述生成下混合信號(hào)和殘余信號(hào)的步驟還 包括旁路第二前景音頻對(duì)象。
4.根據(jù)權(quán)利要求1的多對(duì)象編碼方法,其中所述子音頻對(duì)象是從立體聲音頻對(duì)象到單 聲道音頻對(duì)象的下混合的音頻對(duì)象。
5.根據(jù)權(quán)利要求1的多對(duì)象編碼方法,其中所述背景音頻對(duì)象是從單聲道音頻對(duì)象到 立體聲音頻對(duì)象的下混合的音頻對(duì)象。
6.一種多對(duì)象音頻編碼方法,包括通過將單聲道前景音頻對(duì)象下混合到單聲道背景音頻對(duì)象上來生成下混合信號(hào)和殘 余信號(hào);以及生成包括下混合信號(hào)和殘余信號(hào)的比特流。
7.根據(jù)權(quán)利要求6的多對(duì)象音頻編碼方法,其中所述單聲道前景音頻對(duì)象包括第一單 聲道前景音頻對(duì)象和第二單聲道前景音頻對(duì)象,并且所述生成下混合信號(hào)和殘余信號(hào)的步驟包括通過下混合單聲道背景音頻對(duì)象和第一單聲道前景音頻對(duì)象來生成第一下混合信號(hào) 和第一殘余信號(hào);以及通過下混合第一下混合信號(hào)和第二單聲道前景音頻對(duì)象來生成第二下混合信號(hào)和第 二殘余信號(hào)。
8.根據(jù)權(quán)利要求7的多對(duì)象音頻編碼方法,其中所述生成下混合信號(hào)和殘余信號(hào)的步 驟還包括旁通第二單聲道前景音頻對(duì)象。
9.一種多對(duì)象編碼方法,包括通過下混合立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象來生成下混合信號(hào)和殘余信 號(hào);以及生成包括下混合信號(hào)和殘余信號(hào)的比特流。
10.根據(jù)權(quán)利要求9的多對(duì)象編碼方法,其中所述立體聲前景音頻對(duì)象包括第一信號(hào) 和第二信號(hào),并且所述生成下混合信號(hào)和殘余信號(hào)的步驟包括通過下混合單聲道子音頻對(duì)象和第一信號(hào)來生成第一下混合信號(hào)和第一殘余信號(hào);以及通過下混合第一下混合信號(hào)和第二信號(hào)來生成第二下混合信號(hào)和第二殘余信號(hào)。
11.根據(jù)權(quán)利要求10的多對(duì)象編碼方法,其中所述生成下混合信號(hào)和殘余信號(hào)的步驟 還包括旁通第二信號(hào)。
12.根據(jù)權(quán)利要求10的多對(duì)象音頻編碼方法,其中所述立體聲前景音頻對(duì)象包括第一 和第二左聲道信號(hào)、以及第一和第二右聲道信號(hào),并且所述生成下混合信號(hào)和殘余信號(hào)的步驟包括通過下混合單聲道背景音頻對(duì)象、第一左聲道信號(hào)和第一右聲道信號(hào)來生成第一左聲 道下混合信號(hào)、第一右聲道下混合信號(hào)和第一殘余信號(hào);以及通過下混合第一左聲道下混合信號(hào)、第一右聲道下混合信號(hào)、第二左聲道信號(hào)和第二 右聲道信號(hào),來生成第二左聲道下混合信號(hào)、第二右聲道下混合信號(hào)和第二殘余信號(hào)。
13.根據(jù)權(quán)利要求12的多對(duì)象音頻編碼方法,其中所述生成下混合信號(hào)和殘余信號(hào)的 步驟還包括旁路第二左聲道信號(hào)和第二右聲道信號(hào)。
14.一種多對(duì)象音頻編碼方法,包括通過下混合立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象來生成下混合信號(hào)和殘余信 號(hào);以及生成包括下混合信號(hào)和殘余信號(hào)的比特流。
15.根據(jù)權(quán)利要求14的多對(duì)象音頻編碼方法,其中所述立體聲前景音頻對(duì)象和立體聲 背景音頻信號(hào)的每一個(gè)包括第一信號(hào)和第二信號(hào),并且所述生成下混合信號(hào)和殘余信號(hào)的步驟包括通過下混合立體聲前景音頻對(duì)象和立體聲背景音頻信號(hào)的第一信號(hào)來生成第一下混 合信號(hào)和第一殘余信號(hào);以及通過下混合立體聲前景音頻對(duì)象和立體聲背景音頻信號(hào)的第二信號(hào)來生成第二下混 合信號(hào)和第二殘余信號(hào)。
16.根據(jù)權(quán)利要求15的多對(duì)象音頻編碼方法,其中所述立體聲前景音頻對(duì)象的第一信 號(hào)包括第一左聲道信號(hào)和第二左聲道信號(hào),并且所述生成第一下混合信號(hào)和第一殘余信號(hào)的步驟包括通過下混合立體聲背景音頻對(duì)象的第一信號(hào)以及第一左聲道信號(hào)來生成第一左聲道 下混合信號(hào)和第一左聲道殘余信號(hào);以及通過下混合第一左聲道下混合信號(hào)和第二左聲道信號(hào)來生成第二左聲道下混合信號(hào) 和第二左聲道殘余信號(hào)。
17.根據(jù)權(quán)利要求16的多對(duì)象音頻編碼方法,其中所述生成第一下混合信號(hào)和第一殘 余信號(hào)的步驟還包括旁路第二左聲道信號(hào)。
18.—種多對(duì)象音頻解碼方法,包括接收比特流,該比特流包括通過對(duì)前景音頻對(duì)象和背景音頻對(duì)象進(jìn)行下混合而生成的 下混合信號(hào)、和根據(jù)下混合而生成的殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)前景音頻對(duì)象和背景音頻對(duì)象。
19.根據(jù)權(quán)利要求18的多對(duì)象音頻解碼方法,其中所述前景音頻對(duì)象包括第一前景音 頻對(duì)象和第二前景音頻對(duì)象,所述殘余信號(hào)包括用于第一前景音頻對(duì)象的第一殘余信號(hào)和用于第二前景音頻對(duì)象 的第二殘余信號(hào),所述恢復(fù)前景音頻對(duì)象和背景音頻對(duì)象的步驟包括 使用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一前景音頻對(duì)象;以及 使用在恢復(fù)第一前景音頻對(duì)象之后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二前景音 頻對(duì)象。
20.一種多對(duì)象音頻解碼方法,包括接收比特流,該比特流包括通過對(duì)單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下 混合而生成的下混合信號(hào)、和在下混合之后剩下的殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)前景音頻對(duì)象和背景音頻對(duì)象。
21.根據(jù)權(quán)利要求20的多對(duì)象音頻解碼方法,其中所述單聲道前景音頻對(duì)象包括第一 單聲道前景音頻對(duì)象和第二單聲道前景音頻對(duì)象,所述殘余信號(hào)包括用于第一單聲道前景音頻對(duì)象的第一殘余信號(hào)和用于第二單聲道 前景音頻對(duì)象的第二殘余信號(hào),所述恢復(fù)前景音頻對(duì)象和背景音頻對(duì)象的步驟包括 使用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一單聲道前景音頻對(duì)象;以及 使用在恢復(fù)第一單聲道前景音頻對(duì)象之后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二 單聲道前景音頻對(duì)象。
22.—種多對(duì)象音頻解碼方法,包括接收通過對(duì)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合而生成的下混合 信號(hào)、和在下混合之后剩下的殘余信號(hào);以及使用殘余信號(hào)來恢復(fù)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象。
23.根據(jù)權(quán)利要求22的多對(duì)象音頻解碼方法,其中所述立體聲前景音頻對(duì)象包括第一 信號(hào)和第二信號(hào),所述殘余信號(hào)包括用于第一信號(hào)的第一殘余信號(hào)和用于第二信號(hào)的第二殘余信號(hào),并且所述恢復(fù)立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象的步驟包括使用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一信號(hào);以及使用在恢復(fù)第一信號(hào)之后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二信號(hào)。
24.根據(jù)權(quán)利要求22的多對(duì)象音頻解碼方法,其中所述立體聲前景音頻對(duì)象包括第一 和第二左聲道信號(hào)、以及第一和第二右聲道信號(hào),所述殘余信號(hào)包括用于第一左和右聲道信號(hào)的第一殘余信號(hào)、以及用于第二左和右聲 道信號(hào)的第二殘余信號(hào),所述恢復(fù)第二信號(hào)的步驟包括使用第一殘余信號(hào)和下混合信號(hào)來恢復(fù)第一左和右聲道信號(hào);以及 使用在恢復(fù)第一左和右聲道信號(hào)之后的下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二左和 右聲道信號(hào)。
25.—種多對(duì)象音頻解碼方法,包括接收比特流,該比特流包括通過對(duì)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象進(jìn)行下 混合而生成的下混合信號(hào)、和根據(jù)下混合信號(hào)的殘余信號(hào);以及使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象。
26.根據(jù)權(quán)利要求25的多對(duì)象音頻解碼方法,其中所述立體聲前景音頻對(duì)象和立體聲 背景音頻信號(hào)的每一個(gè)包括第一信號(hào)和第二信號(hào),所述殘余信號(hào)包括用于第一信號(hào)的第一殘余信號(hào)和用于第二信號(hào)的第二殘余信號(hào), 所述恢復(fù)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象的步驟包括 使用下混合信號(hào)和第一殘余信號(hào)來恢復(fù)第一信號(hào);以及 使用下混合信號(hào)和第二殘余信號(hào)來恢復(fù)第二信號(hào)。
27.根據(jù)權(quán)利要求26的多對(duì)象音頻解碼方法,其中所述立體聲前景音頻對(duì)象的第一信 號(hào)包括第一左聲道信號(hào)和第二左聲道信號(hào),所述第一殘余信號(hào)包括用于第一左聲道信號(hào)的第一左聲道殘余信號(hào)和用于第二左聲 道信號(hào)的第二左聲道殘余信號(hào), 所述恢復(fù)第一信號(hào)的步驟包括使用下混合信號(hào)和第一左聲道殘余信號(hào)來恢復(fù)第一左聲道信號(hào);以及 使用在恢復(fù)第一左聲道信號(hào)之后的下混合信號(hào)和第二左聲道信號(hào)來恢復(fù)第二左聲道 信號(hào)。
28.—種多對(duì)象音頻編碼設(shè)備,包括下混合發(fā)生器,用于通過對(duì)前景音頻對(duì)象和背景音頻對(duì)象進(jìn)行下混合來生成下混合信 號(hào)和殘余信號(hào);以及生成包括下混合信號(hào)和殘余信號(hào)的比特流。
29.—種多對(duì)象音頻編碼設(shè)備,包括下混合發(fā)生器,用于通過對(duì)單聲道前景音頻對(duì)象和單聲道背景音頻對(duì)象進(jìn)行下混合來 生成下混合信號(hào)和殘余信號(hào);以及比特流發(fā)生器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。
30.一種多對(duì)象音頻編碼設(shè)備,包括下混合發(fā)生器,用于通過下混合立體聲前景音頻對(duì)象和單聲道背景音頻對(duì)象來生成下 混合信號(hào)和殘余信號(hào);以及比特流發(fā)生器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。
31.一種多對(duì)象音頻編碼設(shè)備,包括下混合發(fā)生器,用于通過對(duì)立體聲前景音頻對(duì)象和立體聲背景音頻對(duì)象進(jìn)行下混合來 生成下混合信號(hào)和殘余信號(hào);以及比特流發(fā)生器,用于生成包括下混合信號(hào)和殘余信號(hào)的比特流。
32.—種多對(duì)象音頻解碼設(shè)備,包括接收器,用于接收比特流,該比特流包括通過對(duì)前景音頻對(duì)象和背景音頻對(duì)象進(jìn)行下 混合來生成的下混合信號(hào)、和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)前景音頻對(duì)象和背景音頻對(duì)象。
33.一種多對(duì)象音頻解碼設(shè)備,包括接收器,用于接收比特流,該比特流包括通過對(duì)單聲道前景音頻對(duì)象和單聲道背景音 頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)、和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)單聲道前景音頻對(duì)象和單聲道背景 音頻對(duì)象。5
34.一種多對(duì)象音頻解碼設(shè)備,包括接收器,用于接收比特流,該比特流包括通過對(duì)立體聲前景音頻對(duì)象和單聲道背景音 頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)、和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)立體聲前景音頻對(duì)象和單聲道背景 音頻對(duì)象。
35.一種多對(duì)象音頻解碼設(shè)備,包括接收器,用于接收比特流,該比特流包括通過對(duì)立體聲前景音頻對(duì)象和立體聲背景音 頻對(duì)象進(jìn)行下混合來生成的下混合信號(hào)、和根據(jù)下混合信號(hào)來生成的殘余信號(hào);以及恢復(fù)器,用于使用殘余信號(hào)來從下混合信號(hào)中恢復(fù)立體聲前景音頻對(duì)象和立體聲背景 音頻對(duì)象。
全文摘要
提供了一種多對(duì)象音頻編碼和解碼方法以及其設(shè)備。所述多對(duì)象編碼方法包括通過下混合前景音頻對(duì)象和背景音頻對(duì)象來生成下混合信號(hào)和殘余信號(hào);以及生成包括下混合信號(hào)和殘余信號(hào)的比特流。
文檔編號(hào)G10L19/00GK101911180SQ200880122328
公開日2010年12月8日 申請(qǐng)日期2008年10月21日 優(yōu)先權(quán)日2007年10月22日
發(fā)明者姜京玉, 徐廷一, 李泰辰, 洪鎮(zhèn)佑, 白承權(quán), 金鎮(zhèn)雄 申請(qǐng)人:韓國(guó)電子通信研究院