專利名稱:多媒體顯示系統(tǒng)和操作數(shù)據(jù)處理系統(tǒng)的方法
本發(fā)明涉及用于播放多媒體作品的顯示系統(tǒng)，更特別的，涉及根據(jù)與音軌相關的圖象的剪切而改變音軌的聲音處理系統(tǒng)。
包括具有敘述、背景聲音、背景音樂的靜止或運動圖象的多媒體作品變得普遍起來。這種作品可以在互連網(wǎng)或CD-ROM上找到。用于在計算機上播放帶有聲音的運動畫面的系統(tǒng)和其它數(shù)據(jù)處理系統(tǒng)普遍用例如VIDEO FOR WINDOWS的程序在計算機上重現(xiàn)作品。此外，聲音的三維建?？梢栽赩RML2.0中詳細說明。在VRML2.0兼容瀏覽器中，通過為每個聲源提供獨立的音軌以及聲源在情景中的定位，可以指定由情景中的各元素產(chǎn)生的聲音。在相對于聲源的任何位置上面向任何方向的聽眾所接收到的聲音可以通過將各個聲源組合來再生。
不同于固定的顯示系統(tǒng)，基于計算機的顯示系統(tǒng)允許觀眾剪切、放大并顯示數(shù)字圖象的一部分，卷動被放大的圖象，并在另一個剪切幀中顯示放大的圖象。然而，對于靜止圖象或運動圖象來說，以前技術的音頻數(shù)據(jù)處理系統(tǒng)并不能根據(jù)被播放的圖象中的變化來改變音軌。通常，同樣的聲音被再現(xiàn)而不考慮用戶所選擇的剪切幀。VIDEO FOR WINDOWS并不提供能夠剪切運動畫面圖象和在屏幕上顯示被剪切的圖象的功能。出于該原因，作為被VIDEO FOR WINDOWS所使用運動畫面文件的常規(guī)AVI文件，通常并不包括用于根據(jù)剪切幀在運動畫面圖象中的位置來控制多個音頻流的數(shù)據(jù)。因此，如果視頻流與多個音頻流相關，傳統(tǒng)的程序如VIDEO FOR WINDOWS缺乏根據(jù)用戶對剪切幀在運動畫面圖象中的位置進行定義的情況來控制從多個音頻流中解碼得出的音頻信號的能力。
雖然VRML2.0提供了產(chǎn)生相應于用戶的視點的音軌所需的數(shù)據(jù)并因而創(chuàng)建了可以根據(jù)剪切等操作被改變的三維聲音圖象，利用VRML2.0的系統(tǒng)并不能根據(jù)視覺圖象中的改變來改變“聲音圖象”。此外，VRML2.0實現(xiàn)的聲音模型被定制以便實現(xiàn)三維聲音效果，而非常不適合于處理與二維圖象鏈接的音頻數(shù)據(jù)的應用。因此，沒有一個現(xiàn)存的程序可以自動地控制音頻從而符合用戶對運動畫面圖象中剪切幀的定義。
更廣泛地說，本發(fā)明的目標是提供一種改進的音頻處理系統(tǒng)以用于多媒體作品。
本發(fā)明的另一個目標是提供一個音頻處理系統(tǒng)，能夠根據(jù)用戶選出的情景中的改變而改變音頻的播放。
根據(jù)下述對本發(fā)明的詳細描述和附圖，本發(fā)明的所有目標對于該領域的技術人員將變得很清晰。
本發(fā)明是一種顯示系統(tǒng)，用于演示包括表示靜止或運動圖象的圖象數(shù)據(jù)以及與圖象數(shù)據(jù)相關的聲音數(shù)據(jù)的多媒體作品。該系統(tǒng)包括用于顯示從圖象數(shù)據(jù)得出的圖象的顯示器，用于將與該圖象鏈接的第一和第二音頻軌跡組合并播放的音頻播放系統(tǒng)，用于根據(jù)顯示系統(tǒng)的用戶命令來選擇顯示器上圖象的一個區(qū)域的定位系統(tǒng)。該系統(tǒng)還包括一個播放處理器，用于根據(jù)定位系統(tǒng)選出圖象的新區(qū)域的情況改變被音頻播放系統(tǒng)播放的第一和第二音頻軌跡的組合。播放處理器還改變顯示使得定位系統(tǒng)選出的圖象部分在中央顯示。在本發(fā)明的一個實施方案中，第一和第二音頻軌跡包括在播放之前要被混合的音軌。在該實施方案中，圖象包括當所選出的顯示區(qū)域在圖象的預定位置中被居中時，指定用于音軌混合的增益的數(shù)據(jù)。如果預定位置中不包括選出區(qū)域的中心，播放系統(tǒng)內(nèi)插預定位置數(shù)據(jù)以提供將被用于音軌混合的增益。在本發(fā)明的另一個實施方案中，多媒體作品包括用于以多個分辨率指定圖象的數(shù)據(jù)。在該實施方案中，定位系統(tǒng)還根據(jù)用戶的輸入選擇其中一個分辨率。播放處理器然后根據(jù)選出的區(qū)域和選出的分辨率來改變被音頻播放系統(tǒng)播放的第一和第二音頻軌跡的組合。
本發(fā)明也是一種在多媒體作品播放過程中操作數(shù)據(jù)處理系統(tǒng)的方法，其中的多媒體作品包括圖象數(shù)據(jù)和與圖象數(shù)據(jù)相關的聲音數(shù)據(jù)。在該方法中，從圖象數(shù)據(jù)得出的圖象被顯示。與圖象鏈接的第一和第二音頻軌跡被組合并播放。數(shù)據(jù)被從選出顯示圖象的一個區(qū)域的用戶處接收。根據(jù)所接收的數(shù)據(jù)，顯示圖象的所選出區(qū)域被居中顯示并且第一和第二音頻軌跡的組合被更改。

圖1表示簡單的多媒體顯示。
圖2是根據(jù)本發(fā)明一個實施方案的圖象顯示系統(tǒng)的簡圖。
圖3是根據(jù)本發(fā)明另一個實施方案的聲音和圖象處理系統(tǒng)的方框圖。
圖4表示內(nèi)插為圖象中選出象素而存儲的聲音處理參數(shù)以獲得新的聲音處理參數(shù)。
參考圖1，本發(fā)明實現(xiàn)其優(yōu)越之處的方式會更容易被理解，其中圖1說明了簡單的多媒體顯示。該顯示包括由鋼琴15和貝斯16組成的圖象11和這兩個樂器產(chǎn)生的音樂作品的音軌。該音軌是通過包括揚聲器17和18的立體聲系統(tǒng)來播放的。該立體聲軌跡是由兩個音頻軌跡構成的，一個是鋼琴的，一個是貝斯的。每個音頻軌跡都有右分量和左分量，它們被混合以產(chǎn)生發(fā)送到揚聲器17和18的信號。與圖象11一致的信號的混合產(chǎn)生一個“聲象”，其中鋼琴顯得離揚聲器17近一些，而貝斯顯得離揚聲器18近一些。
很多播放系統(tǒng)允許用戶通過在期望部分周圍定義一個剪切幀來放大顯示的各個部分。剪切的圖象以其自己的幀的形式被重新顯示。在一些系統(tǒng)中，剪切的圖象被放大以填充原始幀。如上面提到的，以前技術的系統(tǒng)不能改變聲象以考慮新的視覺圖象。作為結果，剪切幀12中顯示的被剪切圖象將有一個聲象，其中鋼琴15在剪切幀中的位置仍然與它在原始幀中所占的位置相同。即，鋼琴15仍然與揚聲器17更近，即使它現(xiàn)在位于新幀的中間。這種聲象和視覺圖象中的不一致性對于人類觀察者是一種干擾。
本發(fā)明解決了以前技術中顯示的這一問題，其方式是根據(jù)對原始圖象的剪切來改變聲象。因此，在本發(fā)明中，當用戶定義一個剪切幀例如幀14時，音軌被重新混合使得視聲源同樣在聲象中運動位置。因此，在本發(fā)明中，當觀察幀從原始幀11切換到剪切幀14中時，貝斯的聲音將被運動使得它與揚聲器17和18的距離相等。
現(xiàn)在參考圖2，該圖是根據(jù)本發(fā)明一個實施方案的圖象顯示系統(tǒng)50的一個簡圖。在該實施方案中，用戶用例如施加到圖象數(shù)據(jù)57的指針65來指定一個剪切幀，其中的圖象數(shù)據(jù)在顯示器70上顯示。被剪切的圖象邊界通過剪切控制器51被輸入，其中的剪切控制器51將新幀的限值發(fā)送到顯示系統(tǒng)中適當?shù)募羟凶映绦?2。新圖象邊界還被送到增益控制器53，該控制器控制為每個音頻軌跡產(chǎn)生的右和左揚聲器信號分量的混合。在本發(fā)明的這個實施方案中，音頻軌跡被獨立處理并通過求和放大器58和59在播放系統(tǒng)66中被混合以給出最終被送往立體聲系統(tǒng)中的左右聲道61和62的左右信號。示例性的音頻軌跡在54-56中給出。每個音頻軌跡包括左、右分量，它們的相對增益由施加給相應放大器對的增益設置來確定。對應于音頻軌跡54的放大器在63和64給出。通過調(diào)整左、右音頻軌跡的相對增益，幀中該軌跡的聲象的視位置可以從一邊移到另一邊。在圖2的實施方案中，對應于情景中N個聲學源存在N個這種音頻軌跡。
在圖1中給出的簡單圖象中，只存在兩個這種音頻軌跡，一個用于鋼琴，一個用于貝斯?？紤]剪切幀12中的圖象，由于鋼琴圖象在接近中央處顯示而貝斯圖象在右邊顯示，兩個樂器聲音的立體聲定位必須被改變使得鋼琴聲音表現(xiàn)為來自于靠近中央的位置，而貝斯聲音表現(xiàn)為來自較遠的右邊位置。因此，圖2中(R1，L1)和(R2，L2)受增益控制器的控制使得例如，左、右聲道的相對增益現(xiàn)在是(R1，L1)＝(0.5，0.5)和(R2，L2)＝(1.0，0.0)。
如果通過來自用戶的指令圖象的顯示位置改變到剪切幀14，那麼鋼琴圖象將在左邊顯示而貝斯將在圖象中央附近顯示。因此，增益控制器必須運動相對的增益使得例如(R1，L1)＝(0.0，1.0)和(R2，L2)＝(0.5，0.5)。
在本發(fā)明的這個實施方案中，對于圖象中位于(x，y)的每個象素指定每個源的音軌屬性。例如，為每個象素存儲的信息P(x，y)除了圖象象素值v之外，還可以包括每個音頻軌跡的左、右聲道增益，即，P(x，y)＝(v，R1，L1，R2，L2) (I)當圖象被剪切使得剪切圖象的中心不同于未剪切圖象的中心時，從等式(1)得出的現(xiàn)在在顯示中心的象素的數(shù)據(jù)被用來重新計算音頻屬性，其方式為根據(jù)通過剪切舊幀創(chuàng)建的新幀中該音軌的聲源位置來改變每個音軌的相對混合。
本發(fā)明的教導也可以應用于多分辨率圖象。出于該目的，多分辨率圖象被定義為能夠在兩個或多個不同的放大倍數(shù)中觀看的圖象。這種圖象可以通過縮放設置來明確。為了放大圖象，即，增加放大倍數(shù)，用戶可以指向圖象中的具體位置。顯示系統(tǒng)選出在新位置居中的區(qū)域，并用次最高分辨率水平來填充顯示區(qū)域。實際上，顯示系統(tǒng)在顯示窗口的邊界上剪切次最高分辨率圖象。放大操作可以根據(jù)圖象的左右定位線和距離來改變觀察者的有效位置。因此，各個音頻軌跡的音量和左右聲道的相對增益必須被調(diào)整以便在圖象被放大時提供實際的音軌。重新計算左右平衡以及每個音頻源的幅度所需的數(shù)據(jù)可以通過在各種分辨率下為每個左、右放大器指定增益而明確。即，分辨率層r中的象素屬性P(x，y，r)和位置(x，y)被定義為包括當(x，y)上的象素成為情景中心時將要使用的聲道放大倍數(shù)，即，P(x，y，r)＝(v，R1，L1，R2，L2，...，Rn，Ln) (2)再次參考圖1中的例子，當剪切幀被設置為幀14并且圖象在原始幀中重新顯示時，貝斯部分被放大，并且移到中心。在這種情況下，貝斯的聲音從本質(zhì)上被加大。如果新幀完全消除了鋼琴，那么在本發(fā)明的某些實施方案中只有貝斯音頻軌跡的聲音將被播放，即，鋼琴音頻軌跡被衰減到0。然而，根據(jù)前面的討論，對于該領域的技術人員很明顯的是，鋼琴軌跡仍然以衰減聲級存在的實施方案也是實用的，并不偏離本發(fā)明的教導。
本發(fā)明的教導還可以應用于動畫。在這種情況下，多媒體作品包括表示運動圖象的圖象數(shù)據(jù)，其中的運動圖象包括幀序列。通過為每個運動畫面幀中的每個象素引入聲音值，使得當該象素變成幀的中心時，音頻軌跡可以被調(diào)整，上面描述的方法可以一幀一幀的應用，即對于幀f中位于(x，y)的象素有P(x，y，f)＝(v，R1，L1，R2，L2，...，Rn，Ln) (3)這里，v是圖象中相關象素的圖象象素值，R1，L1，R2，L2…Rn，Ln分別是音頻源1到n的左右聲道增益。因此，可以根據(jù)觀察區(qū)域中的改變在時間上改變立體聲方位。
在多分辨率運動畫面的情況下，可以存儲每一幀的各個分辨率層的音頻聲道幅度，從而允許利用由縮放指定的視覺觀察場中的變化及時調(diào)整音頻源的相對音量。在這種情況下有P(x，y，f，r)＝(v，R1，L1，R2，L2，...，Rn，Ln) (3-1)雖然上面描述的本發(fā)明的實施方案使用了放大器來處理音頻軌跡，根據(jù)以前的討論，對于本領域的技術人員很明顯的是，可以使用其它的處理器。眾所周知的是，在聲音圖象處理技術中，聲音圖象中聲源的視位置可以通過將數(shù)字化的音軌濾波而被改變。參考圖3，該圖是根據(jù)本發(fā)明另一個實施方案的聲音和圖象處理系統(tǒng)150的方框圖。為了簡化下面的討論，系統(tǒng)150中具有圖2中元件的相似功能的元件與圖2中具有相似功能的元件的參考標號相差100。在系統(tǒng)150中，用戶又確定一個用于剪切或放大的圖象區(qū)域。關于新情景的信息被濾波器控制器153轉(zhuǎn)換成一組濾波器系數(shù)，這些系數(shù)被數(shù)字濾波器施加給相關音軌。示例數(shù)字濾波器在163和164中給出。每個數(shù)字濾波器系數(shù)根據(jù)剪切區(qū)域的中心坐標(x，y)、分辨率層r、運動圖象幀和位置來改變。
通過使用數(shù)字濾波器，可以實現(xiàn)音軌中更復雜的改變。例如，音樂廳場景中的音軌可以被改變，以便包括在情景縮放時被改變的回聲，從而產(chǎn)生更真實的音軌。此外，這種處理可以為雙耳聲記錄或伴音播放而定制，在雙耳聲記錄中，聲音通過雙耳式耳機播放，而在伴音播放中，聲音通過立體聲揚聲器而不是雙耳式耳機來播放。在這兩種情況的任何一種中，聲源被修正以對應于用戶選擇的修正后顯示中的正確位置。
以上所述增益控制器53，濾波器控制器153，放大器63、64，和數(shù)字濾波器163、164可以統(tǒng)稱為播放處理器。
上面描述的本發(fā)明的實施方案使用了多媒體數(shù)據(jù)使得當任何給定象素成為顯示中心時，可以訪問到正確的聲音屬性，其中在多媒體數(shù)據(jù)中為所有象素提供了所有的聲音屬性。然而，根據(jù)前面的討論，對于該領域的技術人員很明白的是，當任何特定象素成為顯示中心時將使用的聲音數(shù)據(jù)可以根據(jù)象素子組的聲音數(shù)據(jù)計算出來。
例如，如果對于圖4中201-204處的特定點，當剪切區(qū)域的中心坐標為(x，y)時，如果每個音頻數(shù)據(jù)的左右聲道的增益給定為P(x，y)，那么，對于具有如在205給出的中心的剪切幀的左右聲道增益可以通過將點201-204給出的值內(nèi)插而從為點201-204存儲的值中獲得。
(Ri(xc，yc)，Li(xc，yc))＝(1-A)(1-B)(Ri0，Li0)+A(1-B)(Ri1，Li1)+ (4)AB(Ri2，Li2)+(1-A)B(Ri3，Li3)其中當圖象剪切區(qū)域的中心位置為(xc，yc)時，(Ri(xc，yc)，Li(xc，yc))是第I個音軌的左右聲道增益，并且，當圖象剪切區(qū)域的中心位置在第j個參考點時，(Rij，Lij)是音軌數(shù)據(jù)第I個分量的左右聲道增益。這里，A和B是圖象剪切區(qū)域的中心位置被圖4中給出的4個參考點定義的矩型區(qū)域的寬和高所除的比例，即，0≤A，B≤1.
雖然圖4中的例子用到了4個參考點，根據(jù)前面的討論，對于該領域的技術人員而言很明顯的是可以使用其它數(shù)量的參考點。如果例如，僅對聲音圖象的左右位置進行校正，那么只需要兩個參考點。同樣的，如果上面討論的簡單線性內(nèi)插的結果不會令人滿意，那么更大數(shù)量的參考點可以被使用。在這種情況下，距離新中心位置最近的參考點的子組被內(nèi)插。另外，在使用高階內(nèi)插算法時可以使用額外的參考點。
上面討論的內(nèi)插方法已經(jīng)以固定分辨率、非運動圖象的形式被描述。然而，根據(jù)以前的討論，對于本領域的技術人員很明顯的是，類似的方法可以應用于多分辨率圖象和運動畫面，因為這些圖象類型可以被看做單個分辨率、非運動圖象的組合。因此，如果參考點被包括在每個單分辨率圖象中，相關數(shù)據(jù)可以在單分辨率、非運動圖象級別上被內(nèi)插。還很明白的是，在運動畫面的情況下，對于一些幀，參考點可以被省去。在這種情況下，用于丟失幀的參考點可以通過內(nèi)插參考點而獲得，其中的參考點是為關注幀每一邊的特定幀而提供的。
雖然本發(fā)明以顯示系統(tǒng)的形式被描述，但是根據(jù)上面的討論，對于該領域的技術人員很明白的是，本發(fā)明可以被用于任何通常的具有播放多媒體作品的數(shù)據(jù)處理系統(tǒng)。在這種情況下，本發(fā)明可以通過改變播放子程序以提供各種上面參考本發(fā)明顯示系統(tǒng)實施方案而描述的用戶輸入函數(shù)和混合函數(shù)來實現(xiàn)。
根據(jù)以前的描述和附圖，對于該領域的技術人員來說，針對本發(fā)明的各種修正將變得很明白。因此，本發(fā)明僅受下面權利要求
的限制。
權利要求
1.用于播放多媒體作品的顯示系統(tǒng)[50，150]，其中的多媒體作品包括圖象數(shù)據(jù)和與所述圖象數(shù)據(jù)相關的聲音數(shù)據(jù)，所述系統(tǒng)包括用于顯示從所述圖象數(shù)據(jù)獲得的圖象的顯示器[70]；用于組合并播放與所述圖象鏈接的第一和第二音頻軌跡[54，55，154，155]的播放系統(tǒng)[66，166]；用于在所述顯示器[70]上選出所述圖象中一個區(qū)域的指針[65，165]，所述選出區(qū)域由所述顯示系統(tǒng)[50，150]的用戶命令指定；剪切控制器[51]，用于輸入被剪切的圖像位置，并將其送至播放處理器[53，63，64，153，163，164]；以及播放處理器[53，63，64，153，163，164]，用于根據(jù)指針[65，165]在顯示器[70]上選出新區(qū)域的情況來改變被所述播放系統(tǒng)[66，166]播放的所述第一和第二音頻軌跡[54，55，154，155]的組合，并顯示位于所述顯示器[70]中心的所述新區(qū)域。
2.權利要求
1的顯示系統(tǒng)[50，150]，其中所述第一和第二音頻軌跡[54，55，154，155]包括在播放之前要被混合的音軌，并且其中所述圖象包括當所述顯示器[70]的所述選出區(qū)域在所述圖象的預定位置中被居中時，指定將被用于所述混合的增益的數(shù)據(jù)。
3.權利要求
2的顯示系統(tǒng)[50，150]，其中所述播放處理器[53，63，64，153，163，164]為所述預定位置內(nèi)插所述數(shù)據(jù)以便當所述選出區(qū)域在不同于所述預定位置的點上被居中時為所述音軌提供增益。
4.權利要求
3的顯示系統(tǒng)[50，150]，其中所述多媒體作品包括用于在多個分辨率下指定圖象的數(shù)據(jù)，其中所述指針[65，165]還根據(jù)所述用戶的輸入來選出其中一個分辨率，并且其中所述的播放處理器[53，63，64，153，163，164]根據(jù)所述選出區(qū)域和所述選出分辨率改變被所述播放系統(tǒng)[66，166]播放的第一和第二音頻軌跡[54，55，154，155]的組合。
5.權利要求
4的顯示系統(tǒng)[50，150]，其中所述圖象包括當所述顯示器[70]的所述選出區(qū)域在預定分辨率下在所述圖象的預定位置被居中時，指定用于所述音軌混合的增益的數(shù)據(jù)。
6.權利要求
5的顯示系統(tǒng)[50，150]，其中所述內(nèi)插處理器針對所述預定定位和分辨率內(nèi)插所述數(shù)據(jù)以便當所述選出區(qū)域在不同于所述預定位置和分辨率的點上被居中時為所述音軌提供增益。
7.權利要求
1的顯示系統(tǒng)[50，150]，其中對于每個所述音軌[54，55]，所述播放處理器[53，63，64，153，163，164]包括一個可變增益放大器，所述放大器的增益被根據(jù)所述圖象的所述選出區(qū)域中的變化而設置。
8.權利要求
1的顯示系統(tǒng)[50，150]，其中對于每個所述音軌[154，155]，所述播放處理器[53，63，64，153，163，164]包括一個濾波器，每個濾波器由所輸入的濾波器系數(shù)控制，并且其中所述播放處理器[53，63，64，153，163，164]根據(jù)所述選出區(qū)域中的變化來改變所述濾波器系數(shù)。
9.權利要求
1的顯示系統(tǒng)[50，150]，其中所述圖象數(shù)據(jù)的每個象素包括聲音參數(shù)。
10.用于在多媒體作品播放過程中操作數(shù)據(jù)處理系統(tǒng)的方法，其中的多媒體作品包括圖象數(shù)據(jù)和與所述圖象數(shù)據(jù)相關的聲音數(shù)據(jù)，所述方法包括以下步驟顯示從所述圖象數(shù)據(jù)得出的圖象；將與所述圖象鏈接的第一和第二音頻軌跡[54，55，154，155]組合并播放；根據(jù)用戶選出所述顯示圖象的一個區(qū)域的情況接收數(shù)據(jù)；以及居中顯示所述選出區(qū)域并根據(jù)所述接收的數(shù)據(jù)改變所述第一和第二音頻軌跡[54，55，154，155]組合。
11.權利要求
10的方法，其中所述第一和第二音頻軌跡[54，55，154，155]包括在播放前要被混合的音軌，其中所述圖象包括當所述顯示器[70]的所述選出區(qū)域在所述圖象的預定位置被居中時，指定將要被用于所述混合的增益的數(shù)據(jù)。
12.權利要求
11的方法，其中對所述第一和第二音頻軌跡組合的改變包括為所述預定位置內(nèi)插所述數(shù)據(jù)以便當所述選出區(qū)域在不同于所述預定位置的點上被居中時為所述音軌提供增益。
13.權利要求
12的方法，其中所述多媒體作品包括用于在多個分辨率下指定圖象的數(shù)據(jù)，其中所述接收數(shù)據(jù)還指定了其中一個所述分辨率，并且其中所述第一和第二音頻軌跡[54，55，154，155]的組合依賴于所述選出區(qū)域和所述選出分辨率。
14.權利要求
13的方法，其中，當所述選出區(qū)域在預定分辨率下在所述圖象的預定位置被居中時，所述圖象包括用來指定將被用于所述音軌混合的增益的數(shù)據(jù)。
15.權利要求
14的方法，還包括當所述選出區(qū)域在不同于所述預定位置和分辨率的點上被居中時，為所述預定位置和分辨率內(nèi)插所述數(shù)據(jù)以便為所述音軌[54，55，154，155]提供增益的步驟。
16.權利要求
10的方法，其中將所述音頻軌跡[54，55，154，155]組合的步驟包括為每個所述音頻軌跡[54，55，154，155]改變增益，所述音頻軌跡的增益根據(jù)所述圖象的所述選出區(qū)域中的變化被設置。
17.權利要求
10的方法，其中將所述音頻軌跡[154，155]組合的所述步驟包括為每個所述音頻軌跡[154，155]施加一個濾波器[163，164]，所述濾波器[163，164]中的每一個由濾波器系數(shù)控制，這些系數(shù)根據(jù)所述選出區(qū)域的變化而改變。
18.權利要求
10的方法，其中所述圖象數(shù)據(jù)的每個象素包括聲音參數(shù)。
專利摘要
用于演示多媒體作品的顯示系統(tǒng)(50，150)，其中的多媒體作品包括圖象數(shù)據(jù)和與圖象數(shù)據(jù)相關的聲音數(shù)據(jù)。該系統(tǒng)包括用于顯示從所述圖象數(shù)據(jù)得出的圖象的顯示器(70)，一個用來組合并播放第一和第二音頻軌跡(54，55，154，155)的音頻播放系統(tǒng)(66，166)，以及用來根據(jù)顯示系統(tǒng)(50，150)的用戶命令在顯示器(70)上選擇一個圖象區(qū)域的定位系統(tǒng)(65，165)。該系統(tǒng)還包括播放處理器(53，63，64，153，163，164)用于根據(jù)選出新區(qū)域的定位系統(tǒng)(65，165)改變被音頻播放系統(tǒng)(66，166)播放的第一和第二音頻軌跡(54，55，154，155)的組合。播放處理器(53，63，64，153，163，164)還改變顯示器(70)使得被定位系統(tǒng)(65，165)選出的圖象部分位于顯示器(70)的中心。
文檔編號G06F3/14GKCN1126026SQ98808045
公開日2003年10月29日 申請日期1998年8月11日
發(fā)明者K·納高 申請人:惠普公司導出引文BiBTeX, EndNote, RefMan