專利名稱:聲音處理裝置、聲音數(shù)據(jù)選擇方法和聲音數(shù)據(jù)選擇程序的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及聲音數(shù)據(jù)處理,更具體地講,涉及一種用于選擇聲音數(shù)據(jù)的聲音處理裝置及其用戶接口。
背景技術(shù):
作為近年的信息處理技術(shù)發(fā)展的結(jié)果,大量的內(nèi)容易于保持在存儲(chǔ)介質(zhì)中。作為保持在存儲(chǔ)介質(zhì)中的內(nèi)容,例如,通常經(jīng)由網(wǎng)絡(luò)從分布站點(diǎn)下載音樂內(nèi)容或者在裝置之間復(fù)制音樂內(nèi)容從而保持在存儲(chǔ)介質(zhì)中。使用這種內(nèi)容的用戶從大量內(nèi)容中搜索期望內(nèi)容。 作為用于搜索的方法,通常從列表搜索并選擇期望內(nèi)容,或者顯示內(nèi)容名稱、圖像、視頻等等的文件夾結(jié)構(gòu)。也就是說,用戶基于通過視覺獲得的內(nèi)容信息選擇期望內(nèi)容。關(guān)于聲音數(shù)據(jù),諸如進(jìn)行再現(xiàn)從而可在聽覺上識別的音樂內(nèi)容,不管是否在屏幕上顯示都可以享用再現(xiàn)結(jié)果。在日本未審專利申請公布No. 2008-135891和2008-135892中,公開了同時(shí)再現(xiàn)多個(gè)音樂數(shù)據(jù)并且在此時(shí)對多個(gè)聲音信號執(zhí)行預(yù)定處理以使得音樂信號通過聽覺被聽到從而可由用戶分別聽見的技術(shù)。
發(fā)明內(nèi)容
然而,在再現(xiàn)(聆聽)某音樂數(shù)據(jù)時(shí),可能期望選擇其它的音樂數(shù)據(jù)。例如,用戶可能希望創(chuàng)建僅僅包括喜愛音樂數(shù)據(jù)的播放列表作為再現(xiàn)群的集合(可能希望向播放列表添加新音樂數(shù)據(jù))或者可能希望聆聽(搜索)指定的音樂數(shù)據(jù)進(jìn)行試聽。在這種情況下,通常,音樂數(shù)據(jù)的列表等顯示在顯示屏幕上并且基于視覺信息指定期望的音樂數(shù)據(jù)。然而,通常,用戶不會(huì)全部識別要檢索的多個(gè)音樂數(shù)據(jù)的聲音內(nèi)容并且無法簡單地從視覺信息猜測哪個(gè)聲音內(nèi)容被包括在要檢索的音樂數(shù)據(jù)中。此外,即使在熟悉的音樂數(shù)據(jù)中,如果對內(nèi)容進(jìn)行聲學(xué)檢查,則便于進(jìn)行檢索。為了在對某音樂數(shù)據(jù)進(jìn)行再現(xiàn)的同時(shí)獲得關(guān)于其它音樂數(shù)據(jù)的聲學(xué)信息,需要實(shí)際再現(xiàn)并聆聽該其它音樂數(shù)據(jù)。在現(xiàn)有技術(shù)中,當(dāng)前正在聆聽的音樂數(shù)據(jù)暫停并且再現(xiàn)該其它音樂數(shù)據(jù),或者如果可以的話,同時(shí)再現(xiàn)多個(gè)音樂數(shù)據(jù)。如果當(dāng)前正在聆聽的音樂數(shù)據(jù)暫停,則即使當(dāng)再次再現(xiàn)原音樂數(shù)據(jù)時(shí),為了檢索該音樂數(shù)據(jù)通常執(zhí)行幾個(gè)操作步驟,因此效率下降。此外,如果執(zhí)行多次選擇,則逐個(gè)地順序地重復(fù)音樂數(shù)據(jù)的暫停和再現(xiàn)操作,因此效率類似地下降。
4
如果多個(gè)音樂數(shù)據(jù)被同時(shí)再現(xiàn),尤其,如果多個(gè)音樂數(shù)據(jù)(例如,包括寬帶聲音信號的音樂作品)重疊,則很難區(qū)分各個(gè)音樂數(shù)據(jù)。希望提供一種聲音處理裝置、聲音數(shù)據(jù)選擇方法和聲音數(shù)據(jù)選擇程序,它們使用分離多個(gè)聲音數(shù)據(jù)使得可以憑聽覺同時(shí)聽見的技術(shù)來高效地檢索聲音數(shù)據(jù)。根據(jù)本發(fā)明的實(shí)施例,提供了一種信息處理設(shè)備,該信息處理設(shè)備存儲(chǔ)多個(gè)音頻數(shù)據(jù),顯示與所述多個(gè)音頻數(shù)據(jù)中的每一個(gè)對應(yīng)的信息,接收用于選擇所述多個(gè)音頻數(shù)據(jù)中的至少一個(gè)的輸入,再現(xiàn)所述多個(gè)音頻數(shù)據(jù)中的第一音頻數(shù)據(jù),并且基于在接口接收的輸入啟動(dòng)所述多個(gè)音頻數(shù)據(jù)中的第二音頻數(shù)據(jù)的同時(shí)再現(xiàn),處理第一和第二音頻數(shù)據(jù)以使得用戶可以分別聽清第一和第二音頻數(shù)據(jù),并且輸出處理后的第一和第二音頻數(shù)據(jù)。根據(jù)本發(fā)明,在再現(xiàn)聲音數(shù)據(jù)的同時(shí),可以接收對另一個(gè)聲音數(shù)據(jù)的指定,并且在兩個(gè)音樂數(shù)據(jù)在被分離并被聽到時(shí)進(jìn)行同時(shí)再現(xiàn)的同時(shí)高效地選擇聲音數(shù)據(jù),而不需要停止它們的再現(xiàn)。
圖1是示出包括根據(jù)本發(fā)明實(shí)施例的聲音處理裝置的聲音處理系統(tǒng)的整體結(jié)構(gòu)的框圖;圖2是示出圖1所示的聲音處理單元的結(jié)構(gòu)例子的框圖;圖3是示出本發(fā)明實(shí)施例中的多個(gè)聲音信號的頻帶分割方法的圖;圖4是示出本發(fā)明實(shí)施例中的多個(gè)聲音信號的時(shí)間分割方法的圖;圖5是示出在圍繞用戶的頭部的水平平面中改變定位的方法的圖;圖6是示出如何表示虛擬聲源的位置的圖;圖7是示出圖5所示的改變定位的方法的變型例的圖;圖8是示出本發(fā)明實(shí)施例中的改變定位的詳細(xì)結(jié)構(gòu)例子的圖;圖9是示出通過圖8所示的控制單元控制FIR濾波器的詳細(xì)例子的圖;圖10是示出即使在分離聆聽時(shí)也能夠保持每首歌曲的立體聲的分離并聆聽立體聲歌曲A和歌曲B的例子的圖;圖11是示出當(dāng)分離并聆聽圖10所示的立體聲歌曲A和歌曲B時(shí)通過控制單元控制FIR濾波器的詳細(xì)例子的圖;圖12是示出根據(jù)本發(fā)明實(shí)施例的音樂再現(xiàn)設(shè)備的顯示屏幕的例子的圖;圖13是示出圖12所示的顯示屏幕的預(yù)定操作的圖;圖14是示出本發(fā)明實(shí)施例中通過長按壓操作來執(zhí)行用于分離聆聽的聲音分離處理的示意圖;圖15是示出當(dāng)把本發(fā)明應(yīng)用于具有音樂再現(xiàn)功能的移動(dòng)電話終端或者諸如移動(dòng)音樂播放器的終端裝置時(shí)的操作例子的圖;圖16是圖15的屏幕的放大圖;圖17是圖15的屏幕的放大圖;圖18是圖15的屏幕的放大圖;圖19是示出本發(fā)明實(shí)施例中的用于分離聆聽的聲音分離處理的操作例子的時(shí)序圖20是示出圖14所示的實(shí)施例中的用戶接口的另一個(gè)操作例子的圖;圖21是示出根據(jù)本發(fā)明實(shí)施例的實(shí)現(xiàn)用戶接口的顯示屏幕的例子的圖;圖22A和圖22B是示出本發(fā)明實(shí)施例中的圖像列表中的圖像的拖拽操作的圖;圖23是示出通過圖22所示的拖拽操作而同時(shí)再現(xiàn)多首歌曲的狀態(tài)的示意圖;圖24是示出通過在圖22所示的拖拽操作后執(zhí)行的釋放功能執(zhí)行的預(yù)定功能的圖;圖25是示出本發(fā)明實(shí)施例的例子中的聲音處理裝置的處理的流程圖;以及圖26是示出本發(fā)明實(shí)施例的變型例中的聲音處理裝置的處理的流程圖。
具體實(shí)施例方式在下文中將參照附圖詳細(xì)描述本發(fā)明的實(shí)施例。圖1是示出包括根據(jù)本實(shí)施例的聲音處理裝置的聲音處理系統(tǒng)的整體結(jié)構(gòu)的框圖。這個(gè)聲音處理系統(tǒng)提供使用戶可以選擇存儲(chǔ)在存儲(chǔ)裝置或記錄介質(zhì)中的多個(gè)聲音數(shù)據(jù)中的任何一個(gè)的接口。為此,諸如與每個(gè)聲音數(shù)據(jù)對應(yīng)的文字信息或圖像信息的顯示信息作為列表顯示在屏幕上,并且用戶可以在聆聽多個(gè)聲音數(shù)據(jù)的內(nèi)容(即,聲音自身) 的同時(shí)選擇存儲(chǔ)的聲音數(shù)據(jù)或者檢查所有的聲音數(shù)據(jù)。在本實(shí)施例中,在通過從用戶接口獲得的用戶的輸入操作開始再現(xiàn)多個(gè)聲音數(shù)據(jù)之一后,由于來自用戶輸入單元的用戶操作,在不停止該聲音數(shù)據(jù)的再現(xiàn)的情況下另一聲音數(shù)據(jù)被同時(shí)再現(xiàn)。此時(shí),關(guān)于首先開始進(jìn)行再現(xiàn)的第一聲音數(shù)據(jù)和隨后開始進(jìn)行再現(xiàn)的第二聲音數(shù)據(jù),執(zhí)行使用戶可以分離并憑聽覺聆聽這兩個(gè)聲音數(shù)據(jù)的特定處理。在本說明書中,這種處理稱作用于分離聆聽的聲音分離處理。更具體地講,在聲音分離處理中,多個(gè)輸入聲音數(shù)據(jù)同時(shí)被再現(xiàn)并且對多個(gè)再現(xiàn)的聲音信號應(yīng)用特定濾波處理。接下來,把這樣的聲音信號進(jìn)行混合以輸出具有期望聲道數(shù)的聲音數(shù)據(jù)從而從輸出裝置(例如,立體聲系統(tǒng)或耳機(jī))進(jìn)行聲學(xué)輸出。與一般的再現(xiàn)裝置類似,僅僅多個(gè)輸入聲音數(shù)據(jù)中的一個(gè)可以被再現(xiàn)并且從輸出裝置輸出。在本說明書中,音樂數(shù)據(jù)用作聲音數(shù)據(jù)的例子。然而,本發(fā)明的聲音數(shù)據(jù)不限于音樂數(shù)據(jù)并且可以應(yīng)用于表示諸如閱讀語音、喜劇故事、會(huì)議等、環(huán)境聲音、演講聲音、或者電話的鈴聲(旋律)、電視廣播等的任何聲音的數(shù)據(jù),或者包括在記錄在DVD上的圖像數(shù)據(jù)中的聲音數(shù)據(jù)。寬泛地說,圖1所示的聲音處理系統(tǒng)10主要包括存儲(chǔ)裝置12、聲音處理裝置16和輸出裝置30,其中,存儲(chǔ)裝置12用于存儲(chǔ)多個(gè)音樂數(shù)據(jù),聲音處理裝置16用于從存儲(chǔ)裝置 12讀取音樂數(shù)據(jù)并且把該音樂數(shù)據(jù)再現(xiàn)為聲音信號,輸出裝置30用于把聲音信號作為聲音輸出。存儲(chǔ)裝置12可以包括安裝在設(shè)備中的存儲(chǔ)裝置(諸如硬盤)以及可拆卸地安裝在設(shè)備中的小型存儲(chǔ)介質(zhì)(諸如閃存)。存儲(chǔ)裝置12可以包括諸如經(jīng)由網(wǎng)絡(luò)連接到聲音處理裝置16的服務(wù)器中的硬盤的存儲(chǔ)裝置。聲音處理裝置16包括多個(gè)再現(xiàn)裝置14、用戶輸入單元18、顯示單元19、控制單元 20、存儲(chǔ)單元22、聲音處理單元24、下混合器26和輸出單元27。
再現(xiàn)裝置14把用戶選擇的音樂數(shù)據(jù)(在本例子中為歌曲)作為聲音信號進(jìn)行再現(xiàn)并輸出,并且對從存儲(chǔ)在存儲(chǔ)裝置12中的音樂數(shù)據(jù)中選擇的一個(gè)進(jìn)行適當(dāng)解碼以產(chǎn)生聲音信號。盡管三個(gè)音樂數(shù)據(jù)被同時(shí)再現(xiàn)并且圖1示出了三個(gè)再現(xiàn)裝置14,但是再現(xiàn)裝置的數(shù)目不受限制。此外,如果通過多處理器等并行地執(zhí)行再現(xiàn)處理,則從外觀的立場看,可以使用包括多個(gè)處理單元的一個(gè)再現(xiàn)裝置14,每個(gè)處理單元再現(xiàn)一個(gè)音樂數(shù)據(jù)并且產(chǎn)生一個(gè)聲音信號。用戶輸入單元18使得用戶可以輸入指令,在本實(shí)施例中具有在顯示單元19的顯示屏幕上重疊的輸入?yún)^(qū),并且包括用于檢測用戶觸摸的位置的觸摸面板(觸摸屏幕)。顯示單元19在顯示屏幕上顯示文字或圖像并且包括諸如IXD或有機(jī)EL的顯示裝置和顯示控制器??刂茊卧?0根據(jù)用戶輸入的指令執(zhí)行顯示單元19的顯示的轉(zhuǎn)換,根據(jù)用戶的輸入指令執(zhí)行由再現(xiàn)裝置14再現(xiàn)的音樂數(shù)據(jù)的轉(zhuǎn)換,根據(jù)用戶的指令執(zhí)行再現(xiàn)裝置14或聲音處理單元24的操作的控制等,并且包括CPU等??刂茊卧?0具有執(zhí)行本實(shí)施例中的特有處理的功能。也就是說,在獨(dú)立再現(xiàn)第一聲音數(shù)據(jù)的狀態(tài)下,當(dāng)對第二聲音數(shù)據(jù)執(zhí)行了與通過輸入單元指示開始再現(xiàn)所述聲音數(shù)據(jù)的第一操作不同的第二操作時(shí),控制單元具有由聲音處理單元24處理第一聲音數(shù)據(jù)和第二聲音數(shù)據(jù)并且從輸出單元27輸出混合了第一和第二聲音數(shù)據(jù)的輸出聲音數(shù)據(jù)的功能。存儲(chǔ)單元22包括諸如存儲(chǔ)器或硬盤的存儲(chǔ)介質(zhì),用于存儲(chǔ)音樂數(shù)據(jù)、與每個(gè)音樂數(shù)據(jù)對應(yīng)的信息、圖像數(shù)據(jù)、各種控制數(shù)據(jù)等。存儲(chǔ)單元22還存儲(chǔ)控制單元20進(jìn)行控制所需的表,即,諸如預(yù)定參數(shù)的信息。聲音處理單元24對多個(gè)輸入聲音數(shù)據(jù)執(zhí)行預(yù)定處理以使得通過聽覺聽到這多個(gè)輸入聲音數(shù)據(jù)從而可由用戶分別聽見。更具體地講,對所述多個(gè)輸入聲音數(shù)據(jù)中的每一個(gè)執(zhí)行預(yù)定濾波處理以產(chǎn)生能夠憑聽覺聽到從而可被分別識別的多個(gè)聲音信號(輸出聲音數(shù)據(jù))。強(qiáng)度等級可被反映給每個(gè)音樂數(shù)據(jù)。將在后面描述聲音處理單元24的操作的細(xì)節(jié)。下混合器26將經(jīng)歷了濾波處理的多個(gè)聲音信號進(jìn)行混合以產(chǎn)生具有期望數(shù)目的聲道的輸出信號。輸出單元27包括用于將數(shù)字聲音數(shù)據(jù)轉(zhuǎn)換成模擬聲音信號的D/A轉(zhuǎn)換器、用于對輸出信號進(jìn)行放大的放大器、輸出終端等。輸出裝置30包括用于對混合的聲音信號進(jìn)行聲學(xué)輸出的電聲轉(zhuǎn)換單元,具體地講,包括(內(nèi)部或外部)揚(yáng)聲器、聽筒和耳機(jī)。在本說明書中,術(shù)語“揚(yáng)聲器”不限于揚(yáng)聲器并且可以是任何電聲轉(zhuǎn)換單元。聲音處理系統(tǒng)10對應(yīng)于個(gè)人計(jì)算機(jī)、音樂再現(xiàn)設(shè)備,諸如移動(dòng)播放器等。可以一體地構(gòu)造這個(gè)系統(tǒng),或者可以使用多個(gè)單元的局部連接來構(gòu)造這個(gè)系統(tǒng)。此外,存儲(chǔ)在存儲(chǔ)裝置12中的音樂數(shù)據(jù)的格式不被認(rèn)為是重要的。音樂數(shù)據(jù)可由例如MP3的一般編碼方法進(jìn)行編碼。此外,在下面的描述中,存儲(chǔ)在存儲(chǔ)裝置12中的音樂數(shù)據(jù)是一首歌曲的數(shù)據(jù)并且執(zhí)行歌曲單位的命令輸入和處理。然而,音樂數(shù)據(jù)可以是多首歌曲的集合,例如一個(gè)曲集(album)。下混合器26在按照需要執(zhí)行各種調(diào)整以后混合多個(gè)輸入聲音信號并且輸出為具有預(yù)定聲道數(shù)(例如,單聲道、立體聲或5. 1聲道)的輸出信號。用戶可以使用硬件或軟件固定聲道數(shù)或者切換聲道數(shù)。在關(guān)于存儲(chǔ)在存儲(chǔ)單元22中的音樂數(shù)據(jù)的信息中,可以包括任何一般信息,諸如與音樂數(shù)據(jù)對應(yīng)的歌曲的歌曲標(biāo)題、藝術(shù)家姓名、圖標(biāo)或流派。另外,可以包括聲音處理單元24所需的一些參數(shù)。當(dāng)音樂數(shù)據(jù)存儲(chǔ)在存儲(chǔ)裝置12中時(shí),可以讀取關(guān)于該音樂數(shù)據(jù)的信息并且將其存儲(chǔ)在存儲(chǔ)單元22中?;蛘撸慨?dāng)聲音處理裝置16進(jìn)行操作時(shí),可以從存儲(chǔ)裝置12讀取信息并且將其存儲(chǔ)在存儲(chǔ)單元22中。現(xiàn)在,將描述使一個(gè)用戶可以分離并聆聽同時(shí)再現(xiàn)的多個(gè)音樂數(shù)據(jù)的聲音分離處理。如果使用一組揚(yáng)聲器或耳機(jī)來混合并聆聽多個(gè)聲音,則基本上由于沒有獲得內(nèi)耳級的分離信息,所以根據(jù)聽覺流或音調(diào)等的差別由大腦識別不同聲音。然而,通過這種操作可以區(qū)分的聲音是有限的。因此,很難對各種聲音應(yīng)用這個(gè)操作。如果使用由日本未審專利申請公布No. 2008-135891和2008-135892提出的方法, 則接近內(nèi)耳或大腦的分離信息被人工添加到聲音信號以最終產(chǎn)生即使當(dāng)混合時(shí)也能夠被分離和識別的聲音信號。也就是說,如果如下構(gòu)造聲音處理單元24,則可以分離并聆聽多個(gè)聲音數(shù)據(jù)。在聲音分離處理中,當(dāng)多個(gè)音樂數(shù)據(jù)被同時(shí)再現(xiàn)、混合和輸出時(shí),對每個(gè)聲音信號執(zhí)行濾波處理以分離并聆聽音樂數(shù)據(jù)。具體地講,通過對通過再現(xiàn)每個(gè)音樂數(shù)據(jù)獲得的聲音信號分配頻帶或時(shí)間提供內(nèi)耳級的分離信息,或者通過針對一些或全部聲音信號提供周期性改變、執(zhí)行聲學(xué)處理加工或提供不同定位來提供大腦級的分離信息。為此,當(dāng)聲音信號被混合時(shí),可以獲取內(nèi)耳級和大腦級二者的分離信息,并且最終幫助多個(gè)聲音數(shù)據(jù)的分離和識別。結(jié)果,可以與對顯示屏幕上縮略圖顯示的觀看類似地同時(shí)觀測聲音并且即使當(dāng)希望檢查內(nèi)容時(shí)也容易地檢查多個(gè)音樂內(nèi)容而不會(huì)花費(fèi)過多時(shí)間。此外,可以改變每個(gè)聲音信號的強(qiáng)度等級。具體地講,按照強(qiáng)度等級分配的頻帶可以增加,可以使執(zhí)行濾波處理的方法變強(qiáng)和變?nèi)酰蛘呖梢愿淖儓?zhí)行的濾波處理。因此,可以使得具有高強(qiáng)度等級的聲音信號比其它聲音信號更顯著。為了使具有低強(qiáng)度等級的聲音信號不被消除,不使用分配給具有低強(qiáng)度等級的聲音信號的頻帶。結(jié)果,可以在聆聽多個(gè)聲音信號中的每一個(gè)的同時(shí)使得顯著關(guān)注一聲音信號從而縮窄關(guān)注點(diǎn)。本實(shí)施例的聲音處理裝置16的聲音處理單元24對每個(gè)聲音信號進(jìn)行處理使其可以憑聽覺聽到并且當(dāng)混合時(shí)可被分別識別。圖2示出了聲音處理單元24的結(jié)構(gòu)例子。聲音處理單元24包括預(yù)處理單元40、頻帶分割濾波器42、時(shí)間分割濾波器44、調(diào)制濾波器46、 處理濾波器48和定位設(shè)置濾波器50。在本發(fā)明中所有這些濾波器不是不可缺少的并且可以使用這些濾波器中的至少一個(gè)。根據(jù)這些濾波器的性質(zhì)可以使用多個(gè)濾波器。預(yù)處理單元40可以是一般的自動(dòng)增益控制器等并且控制增益從而使得從再現(xiàn)裝置14接收的多個(gè)聲音信號的音量變得大致均勻。頻帶分割濾波器42為每個(gè)聲音信號分配通過分割可聽頻帶而獲得的塊并且從每個(gè)聲音信號提取屬于所分配的塊的頻率分量。例如,通過構(gòu)造在每個(gè)塊和聲音信號的每個(gè)聲道中設(shè)置的帶通濾波器(未示出),頻帶分割濾波器42可以提取頻率分量。通過使控制單元20能夠控制每個(gè)帶通濾波器等以設(shè)置頻帶或設(shè)置有效帶通濾波器,可以改變用于決定對塊進(jìn)行分割的方式的分割模式或用于決定為聲音信號分配塊的方式的分配模式。時(shí)間分割濾波器44通過改變幾十毫秒到幾百毫秒的時(shí)間段中的相位,執(zhí)行聲音信號的時(shí)間分割方法并且對每個(gè)聲音信號的幅值進(jìn)行時(shí)間調(diào)制。例如通過在時(shí)間軸上控制增益控制器來實(shí)現(xiàn)時(shí)間分割濾波器44。調(diào)制濾波器46執(zhí)行向聲音信號周期性提供特定改變的方法并且例如通過在時(shí)間軸上控制增益控制器、均衡器、聲音濾波器等來實(shí)現(xiàn)。處理濾波器48執(zhí)行對聲音信號正常執(zhí)行特殊效果(下文稱作處理加工)的方法并且例如通過特效器等實(shí)現(xiàn)。定位設(shè)置濾波器50執(zhí)行把定位改變?yōu)樘摂M聲源的位置的方法并且例如通過移動(dòng)立體聲錄音法(panpot)、虛擬環(huán)繞聲(virtual surround)等的三維定位處理等來實(shí)現(xiàn)。在本實(shí)施例中,如上所述,憑聽覺聽到多個(gè)混合的聲音信號從而由用戶分別識別。 此外,可以強(qiáng)調(diào)和聆聽聲音信號中的任何一個(gè)。為此,在頻帶分割濾波器42或其它濾波器中,根據(jù)用戶請求的強(qiáng)度等級改變該處理。另外,還根據(jù)強(qiáng)度等級選擇通過聲音信號的濾波器。在后者的情況下,解復(fù)用器連接到每個(gè)濾波器的聲音信號的輸出端子。此時(shí),通過來自控制單元20的控制信號來設(shè)置下一個(gè)濾波器的輸入的存在或不存在,可以改變選擇還是不選擇下一個(gè)濾波器。根據(jù)聲音分離處理,通過改變提供給聲音處理單元24的每個(gè)濾波器的參數(shù),可以根據(jù)分離聆聽方法分離并區(qū)分同時(shí)輸出的多個(gè)音樂數(shù)據(jù)。提供的參數(shù)的改變模式被預(yù)先存儲(chǔ)在存儲(chǔ)單元22中。此外,這種改變模式可以是聲音處理單元24中的用以執(zhí)行最優(yōu)處理的內(nèi)部參數(shù)或多個(gè)表。更具體地講,作為根據(jù)聲音分離處理的分離聆聽方法,在下文中給出了現(xiàn)有技術(shù)的多種方法。(1)頻帶分割方法首先,作為提供內(nèi)耳級的分離信息的方法,將描述聲音信號在頻帶中的分割和聲音信號的時(shí)間分割。圖3是示出了多個(gè)聲音信號的頻帶分割方法的圖。該圖中的水平軸表示頻率,可聽頻帶在從頻率f0到頻率f8的范圍內(nèi)。在該圖中示出了混合并聆聽兩首歌曲A和B的聲音信號的情況。歌曲的數(shù)目不受特別限制。在頻帶分割方法中,可聽頻帶被分割成多個(gè)塊并且向每個(gè)塊分配多個(gè)聲音信號中的至少任何一個(gè)。然后,僅僅提取屬于分配給多個(gè)聲音信號中的每一個(gè)聲音信號的塊的頻率分量。在圖3所示的例子中,通過根據(jù)頻率fl、f2........f7分割整個(gè)頻率范圍,將可
聽頻帶f0到f8分割成八個(gè)塊。例如,如斜線所示,四個(gè)塊fl到f2、f3到f4、f5到f6以及 f7到f8被分配給歌曲A,并且四個(gè)塊f0到fl、f2到f3、f4到f5以及f6到f7被分配給歌
曲B。這里,變成塊之間的邊界的頻率fl、f2........f7例如被設(shè)置成24Bark(巴克)閾
值頻帶的邊界頻率中的任何一個(gè)從而進(jìn)一步提高頻帶分割的效果。閾值頻帶是指這樣的頻帶在該頻帶中,即使當(dāng)具有某頻帶的聲音延伸至更大帶寬時(shí),其它聲音的掩蔽量不增加。掩蔽(masking)是任何聲音的最小可聽值由于其它聲音的存在而增加的現(xiàn)象,即,難以聽到任何聲音的現(xiàn)象。掩蔽量是最小可聽值的增加量。很難在彼此不同的閾值頻帶中掩蔽聲音。通過使用通過實(shí)驗(yàn)證實(shí)的24Bark閾值頻帶來分割頻
9帶,可以抑制例如屬于頻率Π到f2的塊的歌曲A的頻率分量掩蔽屬于頻率f2到f3的塊的歌曲B的頻率分量的影響。在其它塊中也是這樣的,結(jié)果,歌曲A和歌曲B變成幾乎不會(huì)彼此消除的聲音信號。此外,可以不根據(jù)閾值頻帶執(zhí)行將整個(gè)頻率區(qū)域分割成多個(gè)塊。在任一情況下,通過減小重疊頻帶,可以提供使用內(nèi)耳的頻率分辨率的分離信息。盡管在圖3所示的例子中,每個(gè)塊具有基本相同的帶寬,但實(shí)際上,帶寬可以根據(jù)頻帶而變化。例如,兩個(gè)閾值頻帶可以設(shè)置到一個(gè)塊,并且四個(gè)閾值頻帶可以設(shè)置到一個(gè)塊。在該分割方法(分割模式)中,可以考慮一般聲音的特性(例如,難于掩蔽低頻聲音的特性)或者考慮歌曲的特征頻帶來確定塊分割。這里,特征頻帶是歌曲的表達(dá)中的重要頻帶,諸如主旋律占據(jù)的頻帶。如果預(yù)測特征頻帶彼此重疊,則可以把這些頻帶精細(xì)地分割并且均等地分配,從而不產(chǎn)生無法聽到任一歌曲的主旋律的問題。此外,盡管在圖3所示的例子中,一系列塊被交替地分配給歌曲A和歌曲B,但是分配方法不限于此,并且兩個(gè)連續(xù)塊可以分配給歌曲A。即使在這種情況下,例如,當(dāng)某歌曲的特征頻帶跨越兩個(gè)連續(xù)塊時(shí),這兩個(gè)塊可以分配給該歌曲,即,可以確定分配方法從而使得在歌曲的重要部分最小化頻帶分割的不利影響的產(chǎn)生。(2)時(shí)間分割方法圖4是示出了多個(gè)聲音信號的時(shí)間分割方法的圖。在該圖中,水平軸表示時(shí)間,垂直軸表示幅值(即,聲音信號的音量)。即使在這種情況下,作為例子示出了兩首歌曲A和 B的聲音信號被混合的情況。在時(shí)間分割方法中,以共同的周期調(diào)制聲音信號的幅值。此時(shí),峰的相位被延遲從而根據(jù)歌曲在不同定時(shí)出現(xiàn)峰值。為了接近內(nèi)耳級,此時(shí)的調(diào)制周期可以是幾十毫秒到幾百毫秒。在圖4的例子中,以共同的周期T調(diào)制歌曲A和歌曲B的幅值。歌曲B的幅值在時(shí)間點(diǎn)t0、t2、t4和t6下降而此時(shí)歌曲A的幅值達(dá)到峰值;歌曲A的幅值在時(shí)間點(diǎn)tl、t3 和t5下降而此時(shí)歌曲B的幅值變成峰值。此外,實(shí)際上,如該圖所示,可以執(zhí)行幅值調(diào)制從而使得幅值最大的時(shí)間點(diǎn)和幅值最小的時(shí)間點(diǎn)具有一定等級的時(shí)間幅寬。在這種情況下, 歌曲A的幅值最小的時(shí)刻可以與歌曲B的幅值最大的時(shí)刻匹配。如果三首或更多歌曲被混合,則每首歌曲的峰的相位被均等地延遲從而使得在給定時(shí)刻僅一首特定歌曲的幅值可以被最大化。在幅值到達(dá)峰值的時(shí)間點(diǎn)可以執(zhí)行沒有時(shí)間寬度的正弦波的調(diào)制。在這種情況下,僅僅相位被延遲并且幅值到達(dá)峰值時(shí)的定時(shí)變得不同。在任一情況下,可以提供使用內(nèi)耳的時(shí)間分辨率的分離信息。(3)提供大腦級的分離信息的方法接下來,將描述提供大腦級的分離信息的方法。在大腦級提供的分離信息提供了當(dāng)在大腦中分析聲音時(shí)識別每個(gè)聲音的聽覺流的線索。在本實(shí)施例中,介紹了向聲音信號周期性提供特定變化的方法、對聲音信號正常執(zhí)行處理加工的方法、和改變定位的方法。(3-1)在向聲音信號周期性提供特定變化的方法中,對所有或一部分混合的聲音信號的幅值進(jìn)行調(diào)制或者對頻率特性進(jìn)行調(diào)制??梢酝ㄟ^脈沖形狀在短時(shí)間內(nèi)執(zhí)行調(diào)制或者可以執(zhí)行調(diào)制從而在長時(shí)間內(nèi)緩慢變化。如果對多個(gè)聲音信號執(zhí)行共同的調(diào)制,則聲音信號的峰的定時(shí)不同。
10
或者,可以周期性提供例如輕彈聲音的噪聲,可以執(zhí)行通過普通聲音濾波器實(shí)現(xiàn)的處理加工,或者定位可以向左或向右擺動(dòng)。通過組合這些調(diào)制,根據(jù)聲音信號應(yīng)用另一個(gè)調(diào)制,或者延遲定時(shí),可以提供識別聲音信號的聽覺流的線索。(3-2)在對聲音信號正常執(zhí)行處理加工的方法中,針對所有或一部分混合的聲音信號執(zhí)行能夠由一般效應(yīng)器實(shí)現(xiàn)的各種聲學(xué)處理(諸如回聲(echo)、混響(reverb)、變調(diào) (pitch shift)等)之一或組合。通常,頻率特性可以與原聲音信號的頻率特性不同。例如, 即使在具有相同樂器的相同節(jié)拍的歌曲中,經(jīng)歷回聲處理的一首歌曲易于被識別為不同的歌曲。如果對多個(gè)聲音信號執(zhí)行了處理加工,則處理內(nèi)容或處理強(qiáng)度根據(jù)聲音信號而變得不同。(3-3)在改變定位的方法中,不同定位被提供給所有混合的聲音信號。通過在大腦中與內(nèi)耳協(xié)作執(zhí)行聲學(xué)空間信息分析,易于分離聲音信號。由于聲音分離處理根據(jù)定位的變化而變化以分離虛擬聲源的位置,所以它可以稱作聲源分離處理。例如,如圖5所示,在以用戶的頭部H為中心的水平平面中,在水平平面上沿全部 360°圓周的不同方向被分配給歌曲A和歌曲B的聲音數(shù)據(jù)。通常,改變定位從而在彼此相差180°的方向上向兩首歌曲A和B分配虛擬聲源。在該圖中,用戶的右后側(cè)的位置67被分配給歌曲A,用戶的左前側(cè)的位置77被分配給歌曲B。盡管位置67和77距離用戶的距離相同,但是它們不是必須距離相同。即使當(dāng)歌曲A自身在具有多個(gè)聲道的立體聲系統(tǒng)中并且包括多個(gè)虛擬聲源位置時(shí),在這個(gè)例子中,在多首歌曲被同時(shí)再現(xiàn)時(shí)歌曲A的虛擬聲源位置被集中到單個(gè)虛擬聲源位置67。即使在歌曲B中,虛擬聲源位置被集中到單個(gè)虛擬聲源位置77。如圖6所示,虛擬聲源位置由以收聽者的頭部H為中心的水平平面中的歌曲坐標(biāo) (即,遠(yuǎn)離頭部的定位距離r和定位角度Θ)來表示。在這個(gè)例子中,在定位角θ中,用戶的前方是0°。盡管圖5所示的兩首歌曲的定位角度相差180°,但是該差不是必須是180°。例如,角間隔可以是左前側(cè)和右前側(cè)的60°或90°。此外,虛擬聲源的方向不限于圖5的例子。如果同時(shí)再現(xiàn)的歌曲的數(shù)目是3或更多,則可以向各首歌曲分配通過基于歌曲的數(shù)目分割360°的整個(gè)圓周而獲得的不同方向。圖7是示出了圖5所示的改變定位的方法的變型例的圖。在這個(gè)例子中,當(dāng)多首歌曲的同時(shí)再現(xiàn)開始時(shí),每首歌曲不會(huì)直接轉(zhuǎn)變到期望的虛擬聲源位置而是沿預(yù)定路徑移動(dòng)以到達(dá)期望的虛擬聲源位置。在這個(gè)例子中,在歌曲A中,預(yù)定路徑從作為源的頭部H的中心位置移至預(yù)定距離rl的位置61,然后在以距離rl為半徑的弧上追隨位置62到66,到達(dá)期望位置67 (rl,θ 1)。從頭部H(或者位置61)移至位置67所需的時(shí)間是預(yù)定時(shí)間(例如,大約1秒或幾秒)。移動(dòng)路徑上的多個(gè)步進(jìn)(st印wise)位置例如是預(yù)定角度增量的位置。角度增量例如是1°到60°的任意角度。當(dāng)這個(gè)角度減小時(shí)獲得較平滑的定位變化,當(dāng)這個(gè)角度增大時(shí)獲得較粗糙的變化。通過基于移動(dòng)路徑的角度步級的數(shù)目分割預(yù)定時(shí)間, 可以獲得移至相鄰位置的時(shí)間間隔。歌曲B也是這樣的。也就是說,預(yù)定路徑從頭部H經(jīng)由位置71 (rl, θ 3)移動(dòng),追隨弧上的位置72到76,到達(dá)位置77 (rl, θ 2)。圖8是示出了在本發(fā)明的實(shí)施例中改變定位的詳細(xì)結(jié)構(gòu)例子的圖。在該圖中,與圖1所示的元件相同的元件用相同標(biāo)號進(jìn)行表示,因此將省去對它們的描述。
現(xiàn)在,假設(shè)歌曲A和歌曲B被同時(shí)再現(xiàn)。如果從一個(gè)單元的再現(xiàn)裝置14獲得的歌曲A的聲音信號包括數(shù)字L聲道信號和數(shù)字R聲道信號,則通過合成這兩個(gè)信號而獲得的單聲道信號(L+R)/2被輸入到濾波單元50a。作為定位設(shè)置濾波器50的一部分,濾波單元 50a由L和R兩個(gè)聲道的有限脈沖響應(yīng)(FIR)形成。如果歌曲A的聲音信號是原始單聲道信號,則該單聲道信號可以不加改變地輸入到濾波單元50a。類似地,如果從另一個(gè)單元的再現(xiàn)裝置14獲得的歌曲B的聲音信號包括數(shù)字L聲道信號和數(shù)字R聲道信號,則通過合成這兩個(gè)信號而獲得的單聲道信號(L+R)/2被輸入到濾波單元50b。作為定位設(shè)置濾波器50的一部分,濾波單元50b由L和R兩個(gè)聲道的FIR 濾波器形成。濾波單元50a和50b從控制單元20接收控制參數(shù)并且產(chǎn)生用于實(shí)現(xiàn)預(yù)定定位的 L和R聲道輸出聲音數(shù)據(jù)??刂茀?shù)預(yù)先存儲(chǔ)在存儲(chǔ)單元22中作為系數(shù)表23。在這個(gè)例子中,在系數(shù)表23中存儲(chǔ)了頭相關(guān)傳遞函數(shù)(Head Related Transfer Function,HRTF)的參數(shù)。HRTF是指示從聲源傳遞到人耳的聲音的傳遞特性的函數(shù)。這個(gè)函數(shù)具有根據(jù)頭部或耳朵的形狀和聲源的位置而變化的值。與之相對,通過使用這個(gè)函數(shù)值,可以虛擬地改變聲源的位置。在上述的圖5的例子中,通過控制單元20的控制對濾波單元50a進(jìn)行控制從而使得從虛擬聲源位置67聽到歌曲A。類似地,通過控制單元20的控制對濾波單元50b進(jìn)行控制從而使得從虛擬聲源位置77聽到歌曲B。濾波單元50a和50b的L聲道輸出信號在下混合器26中被疊加,通過輸出單元27 的D/A轉(zhuǎn)換器28L轉(zhuǎn)換成模擬信號,由放大器29L進(jìn)行放大,并且作為聲音從輸出裝置30 的L聲道揚(yáng)聲器30L輸出。類似地,濾波單元50a和50b的R聲道輸出信號在下混合器26 中被疊加,通過輸出單元27的D/A轉(zhuǎn)換器28R轉(zhuǎn)換成模擬信號,由放大器29R進(jìn)行放大,并且作為聲音從輸出裝置30的R聲道揚(yáng)聲器30R輸出。圖9是示出了由控制單元20控制FIR濾波器50aL和50aR的詳細(xì)例子的圖。在該圖中,為了方便僅示出了歌曲A。此外,在系數(shù)表23中準(zhǔn)備了要提供給虛擬聲源的每個(gè)不同方向(路徑)的L聲道FIR濾波器和R聲道FIR濾波器的表值。盡管在這個(gè)例子中示出了具有1°的角間隔的表值的例子,但是角間隔不限于1°。從用戶到虛擬聲源的距離r設(shè)置成預(yù)定值。如果距離r自身改變,則可以提供每個(gè)不同距離的系數(shù)表23。在圖5和圖9的例子中,如果同時(shí)再現(xiàn)的任何歌曲是具有左聲道和右聲道的立體聲音,則在進(jìn)行分離聆聽的同時(shí),歌曲一次轉(zhuǎn)換成單聲道信號并且能夠從一個(gè)方向聽到一首歌曲。相反,即使在分離聆聽時(shí),也可以保持每首歌曲的立體聲。圖10是示出了即使在分離聆聽時(shí)也能夠保持每首歌曲的立體聲的分離并聆聽立體聲歌曲A和歌曲B的例子的圖。在這個(gè)例子中,關(guān)于歌曲A,L聲道和R聲道的虛擬聲源設(shè)置成在右前方向具有60°的擴(kuò)展角度間隔的位置(r,θ 1)和(r,θ 2);關(guān)于歌曲B,L聲道和R聲道的虛擬聲源設(shè)置成在左后方向具有60°的擴(kuò)展角度間隔的位置(r,θ 3)和(r, θ 4)。每首歌曲的方向不限于這個(gè)例子。如果同時(shí)再現(xiàn)的歌曲的數(shù)目是2,則具有非常大角度差的兩個(gè)方向(確切地講是相反方向)(例如左前方向和右后方向、左方向和右方向、或者前方向和后方向)是優(yōu)選的。圖11是示出了當(dāng)分離并聆聽圖10所示的立體聲歌曲A和歌曲B時(shí)通過控制單元20控制FIR濾波器50al、50a2、50bl和50b2的詳細(xì)例子的圖。在這種情況下,由一組L和 R FIR濾波器形成的濾波單元50al被分配給歌曲A的L聲道信號,由一組L和R FIR濾波器形成的濾波單元50a2被分配給歌曲A的R聲道信號。類似地,由一組L和RFIR濾波器形成的濾波單元50bl被分配給歌曲B的L聲道信號,由一組L和R FIR濾波器形成的濾波單元50b2被分配給歌曲B的R聲道信號。這些濾波單元的輸出由下混合器26a針對L和 R聲道的每一個(gè)進(jìn)行合成并且被輸入到D/A轉(zhuǎn)換器28L和28R。在下文中,將描述使用以上分離聆聽方法的本實(shí)施例的音樂再現(xiàn)設(shè)備的特有用戶接口(UI)。圖12是示出了音樂再現(xiàn)設(shè)備的顯示屏幕60的例子的圖。這是在顯示單元19上顯示的屏幕結(jié)構(gòu)的例子并且示出了與存儲(chǔ)在存儲(chǔ)裝置12中的每個(gè)音樂數(shù)據(jù)關(guān)聯(lián)的一些標(biāo)題信息的列表。這里,“列表顯示”向用戶提供多個(gè)可選擇聆聽聲音數(shù)據(jù)的選項(xiàng)。顯示在顯示單元60的顯示屏幕19上的信息可以是用于指定每個(gè)音樂數(shù)據(jù)的信息,諸如與每個(gè)音樂數(shù)據(jù)關(guān)聯(lián)的除了標(biāo)題信息以外的文字信息、圖像、運(yùn)動(dòng)圖像等。此外,不限于列表顯示,各種信息顯示可以布置在某些位置并且通過滾動(dòng)可以顯示盡可能多的歌曲信息。在圖12的例子中,多個(gè)可再現(xiàn)歌曲68a到68e的列表通過文本(文字行)顯示在顯示屏幕60上。關(guān)于當(dāng)前正在再現(xiàn)的歌曲(歌曲2),顯示指示該效果的指示符69,S卩,在這個(gè)例子中為文字“再現(xiàn)中”。為了顯示再現(xiàn)狀態(tài),不限于文字顯示。例如,可以采用圖標(biāo)顯示,可以繪制框,或者可以改變行或框的顏色。如果用戶輸入單元I8是觸摸面板,則觸摸區(qū)域位于顯示單元19的顯示屏幕上從而使得用戶觸摸觸摸區(qū)域中的某位置以執(zhí)行位置(坐標(biāo))輸入。同時(shí),顯示單元19的顯示屏幕被顯示給用戶??刂茊卧?0基于輸入的用戶輸入信息確定用戶的觸摸(接觸)對應(yīng)于顯示單元19的哪個(gè)位置。在圖12所示的狀態(tài)下,如圖13所示,當(dāng)用戶針對與當(dāng)前正在顯示屏幕60上再現(xiàn)的歌曲(在這個(gè)例子中,歌曲2)不同的歌曲(在這個(gè)例子中,歌曲4)執(zhí)行預(yù)定操作時(shí),當(dāng)前正在再現(xiàn)的歌曲和新指示的歌曲被臨時(shí)地同時(shí)再現(xiàn)。在這種情況下,將上述的分離聆聽方法應(yīng)用于這兩首歌曲的再現(xiàn)。“預(yù)定操作”是與用于開始歌曲的再現(xiàn)的操作(第一操作) 不同的操作(第二操作),并且在這個(gè)例子中,利用所謂的長按壓,其中同一位置處的觸摸狀態(tài)持續(xù)預(yù)定時(shí)間或更長。更具體地講,當(dāng)用戶的手指78觸摸觸摸面板72時(shí),這個(gè)觸摸被用戶輸入單元18 感測到并且控制單元20確定這個(gè)觸摸對應(yīng)于顯示單元19的哪個(gè)位置??刂茊卧?0確定該位置是否位于在顯示單元19上顯示的各個(gè)音樂數(shù)據(jù)的信息的區(qū)域內(nèi)。如果通過這個(gè)確定指定了音樂數(shù)據(jù),則用戶確定選擇了該音樂數(shù)據(jù)。此時(shí),通過恒定時(shí)間的待機(jī)時(shí)間確定是否存在“長按壓”。為此,確定它是在短時(shí)間后結(jié)束觸摸的輕敲(tap)操作還是長按壓。輕敲操作一般用作用于選擇歌曲的一般操作。也就是說,如果用戶輕敲與列表上的各首歌曲對應(yīng)的位置,則可以互換再現(xiàn)的歌曲。如果觸摸狀態(tài)持續(xù)到待機(jī)時(shí)間結(jié)束之后,則確定它是長按壓。如果確定了由用戶選擇的音樂數(shù)據(jù)不是正被再現(xiàn)的音樂數(shù)據(jù),則控制單元20開始再現(xiàn)該音樂數(shù)據(jù),通過聲音處理單元24針對這兩個(gè)音樂數(shù)據(jù)執(zhí)行上述的聲音分離處理,并且通過下混合器26將音樂數(shù)據(jù)輸出到輸出裝置30。
例如,如圖14示意性所示,在某歌曲A被再現(xiàn)的同時(shí)通過長按壓選擇了另一首歌曲B時(shí),在長按壓持續(xù)的同時(shí)執(zhí)行用于分離聆聽的聲音分離處理。結(jié)果,用戶識別同時(shí)進(jìn)行再現(xiàn)的歌曲A和歌曲B。此時(shí),可以通過來自控制單元20的控制信號來改變聲音處理單元M的每個(gè)濾波器的效果。該聲音分離處理一直持續(xù)到用戶的手指78在觸摸面板的與歌曲68d對應(yīng)的位置上的觸摸結(jié)束為止。當(dāng)長按壓結(jié)束時(shí),恢復(fù)僅對原歌曲A的再現(xiàn)。此時(shí),在長按壓期間歌曲A的再現(xiàn)沒有暫停并且原歌曲A持續(xù)進(jìn)行再現(xiàn)就好像在長按壓后什么都沒有發(fā)生一樣。在歌曲A期間被再現(xiàn)從而中途被疊加的歌曲B可以從該歌曲的第一部分再現(xiàn)或者可以從特定中間位置再現(xiàn)。例如,該中間位置是稱作“副歌(hook part) ”的該歌曲的特征歌曲部分。與歌曲的開始部分相比,這樣的歌曲部分通常有助于歌曲搜索。這種歌曲部分的位置(從歌曲的開始點(diǎn)起的時(shí)間)可以利用作為歌曲的元信息準(zhǔn)備的伴隨音樂數(shù)據(jù)的信息(未示出)。用戶可以選擇中途再現(xiàn)的歌曲B的再現(xiàn)是從中途位置還是開始位置開始,作為初始設(shè)置。通過本實(shí)施例的操作,用戶可以在不停止已聽到此時(shí)的歌曲的再現(xiàn)的情況下分離并聆聽另一首歌曲。為此,可以聆聽另一首歌曲作為預(yù)覽或者比較這兩首歌曲。此外,在圖12所示的狀態(tài)下,使用上述輕敲操作,當(dāng)前正在再現(xiàn)的歌曲可以互換為另一首歌曲。此外,可以通過針對觸摸面板的另一個(gè)觸摸操作(例如,在觸摸的狀態(tài)下迅速移動(dòng)手指的操作)來確定聲音分離處理的結(jié)束,并且可以切換到用戶根據(jù)該操作選擇的歌曲的再現(xiàn)。這種操作是在觸摸狀態(tài)下以高于預(yù)定速度的速度移動(dòng)手指以解除觸摸狀態(tài)并且通常稱作輕拂操作或僅為輕拂(flick)。或者,聲音分離處理可以通過上述的輕敲操作開始,持續(xù)預(yù)定時(shí)間,并且自動(dòng)結(jié)束。取代于自動(dòng)結(jié)束,可以通過觸摸面板的另一個(gè)觸摸操作確定聲音分離處理的結(jié)束。圖15是示出了當(dāng)把本發(fā)明應(yīng)用于具有歌曲再現(xiàn)功能的移動(dòng)電話終端或諸如移動(dòng)歌曲播放器的終端裝置時(shí)的操作例子的圖。屏幕80a示出了當(dāng)使用音樂再現(xiàn)功能時(shí)用于顯示歌曲列表的屏幕。該列表的每行 81顯示了歌曲的標(biāo)題、藝術(shù)家和再現(xiàn)時(shí)間作為歌曲信息。此外,關(guān)于當(dāng)前正在再現(xiàn)的歌曲, 在其行81中顯示與指示符69對應(yīng)的再現(xiàn)標(biāo)記(圖標(biāo))84。當(dāng)用戶在屏幕80a上顯示的第一歌曲(標(biāo)題A)被再現(xiàn)的狀態(tài)下用手指78觸摸第二歌曲的行81 (如屏幕80b—樣)時(shí),該行81被反色(或者強(qiáng)調(diào))顯示。為此,用戶憑視覺識別選擇哪首歌曲作為搜索目標(biāo)。本發(fā)明不限于此,可以顯示圖像、動(dòng)畫或運(yùn)動(dòng)圖像從而向用戶通知該選擇。如果觸摸滿足“長按壓”的條件,則第二歌曲以疊加在第一歌曲上的方式被再現(xiàn)并且執(zhí)行上述的聲音分離處理。此外,在這個(gè)例子中,關(guān)于長按壓的行81的歌曲,預(yù)先作為其歌曲信息存儲(chǔ)的圖像88被顯示為疊加在列表上。為此,可以向用戶提供歌曲的視覺補(bǔ)充信息。圖像的顯示不是本發(fā)明的必要元素。在聲音分離處理繼續(xù)的前后,通過向聲音處理單元M提供先前在存儲(chǔ)單元22中設(shè)置的參數(shù)的變化模式,可以使得通過聲音分離處理的有無而產(chǎn)生的用戶感覺到的聆聽變化為漸進(jìn)的,從而輸出歌曲之間的無縫感覺。將在后面描述這個(gè)操作例子。如果用戶從屏幕80c的狀態(tài)解除手指78的觸摸狀態(tài),則聲音分離處理結(jié)束并且圖像88的顯示和行81的反色顯示被解除。為此,第二歌曲的再現(xiàn)停止并且僅僅第一歌曲的再現(xiàn)繼續(xù)。顯示單元19返回到與屏幕80a等同的屏幕80d。盡管沒有示出,如果在屏幕80c的狀態(tài)下手指78觸摸屏幕的狀態(tài)下通過在屏幕上移動(dòng)從而關(guān)于相鄰行新滿足“長按壓”,則與第一歌曲同時(shí)再現(xiàn)新歌曲(第三歌曲),如上所述。圖16是圖15的屏幕80a的放大圖,圖17是圖15的屏幕80b的放大圖,圖18是圖15的屏幕80c的放大圖。圖19是示出用于分離聆聽的聲音分離處理的操作例子的時(shí)序圖。在作為時(shí)間軸的水平軸上,示出了當(dāng)前歌曲(第一歌曲)96、下一歌曲(第二歌曲)97和用戶的手指的觸摸98之間的關(guān)系。在當(dāng)前歌曲96被再現(xiàn)時(shí),聲音分離處理在滿足觸摸的長按壓的時(shí)間點(diǎn) tl啟動(dòng)。這個(gè)聲音分離處理一直持續(xù)到釋放觸摸的時(shí)刻t3的預(yù)定時(shí)間之后的時(shí)間點(diǎn)t4, 然后被關(guān)閉。在這個(gè)操作例子中,在聲音分離處理的開啟(ON)時(shí)間期間,過渡到兩首歌曲的同時(shí)再現(xiàn)狀態(tài)不會(huì)立即執(zhí)行,而是可以連貫地或者以步進(jìn)方式執(zhí)行。即使在聲音分離處理的關(guān)閉(OFF)時(shí)間內(nèi),兩首歌曲的同時(shí)再現(xiàn)狀態(tài)不會(huì)過渡到原始狀態(tài),而是可以連貫地或者以步進(jìn)方式過渡到原始狀態(tài)。這種處理在本發(fā)明中不是必不可少的,但是獲得了在避免施加到用戶的耳朵的迅速變化的同時(shí)幫助用戶進(jìn)行可聽接收的效果。聲音分離處理的開啟時(shí)間期間的從時(shí)間點(diǎn)tl到t2的過渡時(shí)間稱作淡入時(shí)間。類似地,聲音分離處理的關(guān)閉時(shí)間期間的從時(shí)間點(diǎn)t3到t4的過渡時(shí)間稱作淡出時(shí)間。在本說明書中,淡入是指聲音分離處理的功能從0%過渡到100%的瞬變狀態(tài)。此外,淡出是指聲音分離處理的功能的達(dá)成率從100%返回到0%的瞬變狀態(tài)。聲音分離處理的達(dá)成率的內(nèi)容可以根據(jù)上述分離聆聽方法的類型而變化。例如,在定位改變中,如參照圖7所述,當(dāng)聽到歌曲的方向連貫地或者以步進(jìn)方式改變時(shí)從開始角度到目標(biāo)角度的角度對應(yīng)于達(dá)成率。在參照圖3描述的頻率分割方法中,歌曲A和歌曲B在頻率分割塊的分配數(shù)目方面是相等的。相反,通過改變?yōu)榉峙浣o兩首歌曲的塊的數(shù)目不等,可以改變聲音分離處理的達(dá)成率。例如,在淡入開始時(shí)間點(diǎn)可以把所有塊分配給歌曲A,從不向歌曲B分配塊的狀態(tài)開始分配給歌曲A的塊的數(shù)目下降,并且分配給歌曲B的塊的數(shù)目可以增加。分配給兩首歌曲的塊的數(shù)目變得相等的時(shí)間點(diǎn)變成淡入結(jié)束時(shí)間點(diǎn)。淡出是其逆操作。盡管在參照圖4描述的分割方法中,峰時(shí)間被均等地分配給歌曲A和歌曲B,但是峰時(shí)間可以不均等地分配給這兩首歌曲從而改變聲音分離處理的達(dá)成率。在這種情況下, 存在固定峰的時(shí)間間隔并改變峰的數(shù)目的方法和改變峰的時(shí)間間隔的方法。例如,在淡入開始時(shí)間點(diǎn)可以把全部時(shí)間峰分配給歌曲A,從不向歌曲B分配峰時(shí)間的狀態(tài)開始對歌曲A 的峰時(shí)間的分配比例可以下降,并且對歌曲B的峰時(shí)間的分配比例可以增加。兩首歌曲的峰時(shí)間的分配比例變得相等的時(shí)間點(diǎn)變成淡入時(shí)間點(diǎn)。淡出是其逆操作。此外,在本發(fā)明中,圖19所示的淡入和淡出不是必不可少的。此外,可以僅僅利用淡入和淡出之一(例如,僅僅淡入)。
圖20是示出了圖14所示的本實(shí)施例中的用戶接口的另一個(gè)操作例子的圖。在圖 14的描述中,在用戶的長按壓的結(jié)束時(shí)間點(diǎn),歌曲A和歌曲B的同時(shí)再現(xiàn)返回到僅再現(xiàn)原歌曲(歌曲A)。與之相對,在長按壓狀態(tài)后,如果執(zhí)行了與用于分離聆聽方法的預(yù)定操作 (第二操作)不同的預(yù)定操作(第三操作),則原歌曲被停止并且再現(xiàn)下一首歌曲(稍后所指的歌曲B)。作為第三操作,可以采用以上的輕拂操作。如上所述,即使可以在同時(shí)再現(xiàn)時(shí)從中間部分再現(xiàn)歌曲B,這種情況下的歌曲B的再現(xiàn)也可以從歌曲的開頭開始。接下來,將描述根據(jù)本實(shí)施例的用戶接口的另一個(gè)例子。當(dāng)使用文本(字符串) 顯示歌曲信息的列表時(shí),圖13、圖15等所示的用戶接口允許通過用戶操作進(jìn)行決定。與之相對,可以考慮使用與每首歌曲對應(yīng)的圖像的用戶接口。圖21是示出了用于實(shí)現(xiàn)這種用戶接口的顯示屏幕90的例子的圖。也就是說,使用作為圖像列表的用于選擇歌曲的歌曲列表來顯示與歌曲對應(yīng)的多個(gè)圖像。在這個(gè)例子中, 顯示屏幕在水平方向上較長,并且與歌曲對應(yīng)的圖像(圖像項(xiàng))水平地并列布置在上側(cè)。通過選擇圖像串93中的任何一個(gè)可以選擇歌曲。關(guān)于這個(gè)例子,觸摸面板用作定點(diǎn)裝置。然而,定點(diǎn)裝置不限于觸摸面板。圖像串93可以水平地移動(dòng),并且關(guān)于數(shù)目大于能夠一次在顯示屏幕上顯示的圖像的數(shù)目(該圖的例子中為幻的圖像,隱藏在顯示屏幕之外的圖像可以被顯示。這個(gè)操作稱作圖像串93的滾動(dòng)操作。可以通過用戶的預(yù)定操作來執(zhí)行圖像串93的滾動(dòng)操作。例如,用戶可以用手指在圖像串93(或者特定圖像)的顯示區(qū)域中觸摸屏幕并且在水平方向上移動(dòng)以執(zhí)行圖像串93的水平滾動(dòng)操作。因此,移動(dòng)方向的開始圖像被移至顯示屏幕之外并且位于顯示屏幕之外的圖像從移動(dòng)方向的后側(cè)顯示在顯示屏幕中。在該圖的例子中,位于顯示屏幕的中心的圖像在面向前方的狀態(tài)下被顯示,并且其它的左側(cè)和右側(cè)圖像被傾斜地顯示。這種顯示形式在本發(fā)明中不是必不可少的。在這種圖像列表上,通過對幾個(gè)圖像執(zhí)行第一操作(在以上例子中,輕敲操作), 可以指示選擇和再現(xiàn)歌曲。如果期望改變再現(xiàn)的歌曲,則再次輕敲期望圖像以改變再現(xiàn)的歌曲。顯示的圖像串93中的任何圖像可以進(jìn)行所謂的拖拽操作,從而在用戶用手指觸摸屏幕的狀態(tài)下僅僅根據(jù)手指的移動(dòng)來移動(dòng)圖像。在這個(gè)例子中,可以通過僅在垂直方向上的拖拽操作執(zhí)行單個(gè)圖像的移動(dòng)。在這個(gè)例子中,水平方向的操作被識別為圖像串93的滾動(dòng)的指示操作。即使在相同水平方向上的手指的觸摸移動(dòng)操作中,輕拂操作和拖拽操作也是不同的,并且如果僅僅通過輕拂操作實(shí)現(xiàn)圖像串93的滾動(dòng),則可以在水平方向上執(zhí)行單個(gè)圖像的拖拽操作。拖拽操作與輕拂操作的區(qū)別在于在拖拽操作中,手指的移動(dòng)速度低于預(yù)定速度,并且在輕拂操作中,手指的移動(dòng)速度高于預(yù)定速度。在圖21的例子中,在某歌曲的再現(xiàn)處理期間,當(dāng)對該歌曲的圖像以外的圖像執(zhí)行長按壓操作或拖拽操作時(shí),執(zhí)行本實(shí)施例的同時(shí)再現(xiàn)和聲音分離處理。當(dāng)前正在再現(xiàn)的歌曲的標(biāo)題等與作為指示符的再現(xiàn)標(biāo)記84 —起顯示在上部的帶狀顯示區(qū)域92中。也就是說,手指觸摸任何圖像的顯示范圍達(dá)到特定時(shí)間并且然后進(jìn)行移動(dòng)從而使得在屏幕中移動(dòng)和拖拽各圖像。如果手指與屏幕分離,則此時(shí)圖像返回到它們的原位置。此時(shí),通過連貫地改變顯示位置,圖像可以平滑地返回到它們的原位置。
在圖21的例子中,當(dāng)拖拽圖像并且在顯示屏幕90上的特定區(qū)域95中釋放時(shí),執(zhí)行拖拽操作的目的是執(zhí)行預(yù)定功能。作為預(yù)定功能,例如,當(dāng)執(zhí)行區(qū)域95中的某歌曲的圖像的拖放操作時(shí),用于向播放列表添加該歌曲的功能被包括。盡管播放列表自身未被特別顯示,但是它可以基于用戶的指示顯示在單獨(dú)的屏幕上。此外,圖中顯示在區(qū)域95中的圖像用于向用戶指示通過長按壓操作可以分離并聽到多首歌曲。在同時(shí)再現(xiàn)期間,強(qiáng)調(diào)并顯示區(qū)域95。作為強(qiáng)調(diào)顯示的例子,可以使用高亮顯示(亮度變化)、顏色變化、反色顯示、閃爍顯示等?,F(xiàn)在,在簡單再現(xiàn)某歌曲X的狀態(tài)下,如圖22A所示,當(dāng)用戶拖拽位于屏幕的中心的圖像(歌曲C)時(shí),歌曲C被額外地且同時(shí)地再現(xiàn),并且對歌曲X和歌曲C兩者執(zhí)行上述的聲音分離處理。(在這個(gè)例子中,歌曲X對應(yīng)于屏幕之外的圖像)。該狀態(tài)當(dāng)用戶拖拽與歌曲D對應(yīng)的圖像的同時(shí)持續(xù)。因此,同時(shí),用戶能夠分離、識別并聆聽這兩首歌曲。此時(shí), 由于以視覺方式向用戶指示執(zhí)行了聲音分離處理,所以區(qū)域95被強(qiáng)調(diào)并顯示。圖22A示出了拖拽圖像串的中心的圖像C的狀態(tài)。當(dāng)在與不同于圖像C的圖像對應(yīng)的歌曲的再現(xiàn)期間開始圖像C的拖拽操作時(shí),執(zhí)行伴有兩首歌曲的聲音分離處理的同時(shí)再現(xiàn)。如圖22B所示,拖拽操作不限于圖像串的中心的圖像,并且可以執(zhí)行與屏幕中的歌曲對應(yīng)的某圖像的拖拽操作。盡管在圖22B中傾斜圖像(圖像A)被拖拽并變成面向前方易于觀看的圖像,但是圖像可以保持在傾斜的狀態(tài)下。圖23是示出了通過拖拽操作同時(shí)再現(xiàn)多首歌曲的狀態(tài)的示意圖。如果在歌曲X的再現(xiàn)期間執(zhí)行歌曲C的圖像的拖拽操作,則在拖拽操作的時(shí)間段內(nèi)持續(xù)執(zhí)行伴有歌曲X和歌曲C的聲音分離處理的同時(shí)再現(xiàn)。在拖拽操作結(jié)束的時(shí)間點(diǎn)恢復(fù)原歌曲X的獨(dú)立再現(xiàn)狀態(tài)。如圖對所示,如果把與歌曲對應(yīng)的特定圖像(在該圖的例子中,圖像C)拖放到區(qū)域95中,則作為預(yù)定功能,例如,這首歌曲被添加到播放列表。當(dāng)用戶把手指78從屏幕分離時(shí),圖像C返回到屏幕上的原位置。當(dāng)同時(shí)再現(xiàn)完成時(shí),恢復(fù)原歌曲的單獨(dú)再現(xiàn)。此外,在拖拽操作后,當(dāng)用戶不是僅僅把手指78從圖像分離,而是執(zhí)行上述的第三操作(例如,輕拂操作)時(shí),同時(shí)再現(xiàn)狀態(tài)可以轉(zhuǎn)變到與被拖拽的圖像對應(yīng)的歌曲的獨(dú)立再現(xiàn)。圖25是示出本實(shí)施例的例子中的聲音處理裝置16的處理的流程圖。該處理根據(jù)通過用戶輸入單元18執(zhí)行的用戶的預(yù)定指示而開始(Si)。首先,顯示單元19顯示來自存儲(chǔ)在存儲(chǔ)裝置12中的音樂數(shù)據(jù)的關(guān)聯(lián)信息的列表
(52)。如上所述,這個(gè)列表可以是文本也可以是圖像。接下來,在列表中顯示的音樂數(shù)據(jù)中,確定當(dāng)前正在再現(xiàn)的音樂數(shù)據(jù)是否存在
(53)。如果正在再現(xiàn)的音樂數(shù)據(jù)存在,則指示該音樂數(shù)據(jù)正在再現(xiàn)的指示符被附加顯示在與該音樂數(shù)據(jù)關(guān)聯(lián)的顯示區(qū)域上(S4)。如果在步驟S3中沒有正在再現(xiàn)音樂數(shù)據(jù),則不執(zhí)行處理并且當(dāng)前處理結(jié)束。在步驟S4后,監(jiān)視是否存在由顯示單元19和用戶輸入單元18形成的觸摸面板的有效接觸(觸摸)(SO。當(dāng)感測到這種接觸時(shí),例如,當(dāng)用戶的手指觸摸觸摸面板時(shí),處理前進(jìn)到步驟S6。在步驟S6中,指定在步驟S5中感測到的觸摸位置對應(yīng)于與顯示在顯示單元 19上的音樂數(shù)據(jù)關(guān)聯(lián)的信息的哪個(gè)區(qū)域。確定選擇了與所指定的區(qū)域?qū)?yīng)的音樂數(shù)據(jù)。
在步驟S7中,確定在步驟S6中選擇的音樂數(shù)據(jù)是否已被再現(xiàn)。如果該音樂數(shù)據(jù)已被再現(xiàn),則不執(zhí)行處理并且由此返回到步驟S5。如果選擇的音樂數(shù)據(jù)還沒有被再現(xiàn),則處理前進(jìn)到步驟S8。在步驟S8中,執(zhí)行特定時(shí)間的等待。該特定時(shí)間是用于確定觸摸是否是長按壓的閾值并且例如可以設(shè)置成大約0. 5秒??梢杂捎脩粽{(diào)整這個(gè)預(yù)定時(shí)間。在步驟S9中,檢查在特定時(shí)間過去后觸摸狀態(tài)是否被繼續(xù)保持。如果在特定時(shí)間過去后觸摸已經(jīng)消失,則用戶確定僅僅意圖切換再現(xiàn)的數(shù)據(jù)并且處理前進(jìn)到步驟S16。在步驟S16中,當(dāng)前正在再現(xiàn)的音樂數(shù)據(jù)被停止,通過觸摸選擇的音樂數(shù)據(jù)的再現(xiàn)開始,并且處理返回步驟S2。如果在步驟S9中確定觸摸被繼續(xù)保持,則處理前進(jìn)到步驟S10。在步驟SlO中, 通過觸摸選擇的音樂數(shù)據(jù)的再現(xiàn)開始并且處理前進(jìn)到步驟S11。此時(shí),已經(jīng)一直再現(xiàn)到該時(shí)刻的音樂數(shù)據(jù)的再現(xiàn)繼續(xù)。在步驟Sll中,通過聲音處理單元M對正在再現(xiàn)的所有音樂數(shù)據(jù)開始上述的聲音分離處理。通過聲音處理單元M處理的聲音數(shù)據(jù)通過下混合器沈進(jìn)行合成并且被輸出到輸出裝置30。此時(shí),在顯示單元19中,可以通過改變用于與選擇的音樂數(shù)據(jù)關(guān)聯(lián)的信息部分的顏色或者顯示圖像、動(dòng)畫等以視覺方式強(qiáng)調(diào)選擇的音樂數(shù)據(jù)。此外,在聲音分離處理開始時(shí),可以對聲音處理單元M的每個(gè)濾波器給予先前存儲(chǔ)在存儲(chǔ)單元22中的模式從而使得用戶聆聽歌曲對于他的聽覺而言平滑。在步驟S12中,檢查觸摸狀態(tài)是否繼續(xù)。當(dāng)觸摸狀態(tài)繼續(xù)時(shí),可以繼續(xù)執(zhí)行上述的聲音分離處理。如果在步驟S12中沒有感測到觸摸,則確定觸摸結(jié)束并且處理前進(jìn)到步驟 S13。在步驟S13中,聲音分離處理結(jié)束并且處理前進(jìn)到步驟S14。在步驟S14中,通過用戶的長按壓選擇并再現(xiàn)的音樂數(shù)據(jù)的再現(xiàn)結(jié)束。接下來,在步驟S15中,原音樂數(shù)據(jù)的獨(dú)立再現(xiàn)繼續(xù)。之后,處理返回步驟S3。在聲音分離處理結(jié)束時(shí),可以對聲音處理單元M的每個(gè)濾波器給予先前存儲(chǔ)在存儲(chǔ)單元22中的模式從而使得用戶聆聽歌曲對于他的聽覺而言平滑。伴隨拖拽操作的聲音分離處理的啟動(dòng)基本與伴隨長按壓操作的聲音分離處理相同。在拖拽操作中,伴有圖像的拖拽顯示作為附加處理。作為另一個(gè)操作,在步驟S9中,如果沒有感測到觸摸,則不執(zhí)行再現(xiàn)的音樂數(shù)據(jù)的切換(S16),處理可以前進(jìn)到步驟SlO和S11,其中,聲音分離處理持續(xù)預(yù)定時(shí)間并且處理前進(jìn)到步驟S13。在步驟S6中可以選擇多首歌曲。圖沈是示出本實(shí)施例的變型例中的聲音處理裝置16的處理的流程圖。與圖25 相同的處理步驟用相同標(biāo)號指示并且將省去對它們的描述。如果在步驟S12中在觸摸持續(xù)的同時(shí)檢測到上述的第三操作(例如,輕拂),則聲音分離處理結(jié)束(S17)。此外,原來正在再現(xiàn)的原音樂數(shù)據(jù)的再現(xiàn)停止(S18)并且通過用戶的長按壓選擇的音樂數(shù)據(jù)的獨(dú)立再現(xiàn)繼續(xù)執(zhí)行(S19)。在這種情況下,如上所述,歌曲的再現(xiàn)不會(huì)在切換到歌曲的中途獨(dú)立再現(xiàn),而是會(huì)切換到從開頭的獨(dú)立再現(xiàn)。在步驟S19后,處理返回到步驟S3。根據(jù)上述實(shí)施例,在不停止已聽到直至此時(shí)的聲音數(shù)據(jù)的情況下,用戶易于作為預(yù)覽聆聽并且比較另一個(gè)音樂數(shù)據(jù)。盡管描述了本發(fā)明的適宜實(shí)施例,但是除了以上描述以外還可以進(jìn)行各種變型和改變。也就是說,本領(lǐng)域技術(shù)人員應(yīng)該明白,以上實(shí)施例是示例性的并且可以進(jìn)行組成部件和處理的組合的各種變型例,并且這些變型例在本發(fā)明的范圍內(nèi)。通過在顯示單元19上顯示光標(biāo)或者根據(jù)輸入裝置的類型改變區(qū)域的顏色可以幫助音樂數(shù)據(jù)的選擇。即使在觸摸面板以外的輸入裝置中,除了光標(biāo)等以外,可以使用鍵、按鈕等執(zhí)行諸如觸摸、長按壓、輕拂或拖拽的操作。盡管在本實(shí)施例中舉例說明了聽音樂內(nèi)容的情況,但是本發(fā)明不限于此。例如,在具有音樂數(shù)據(jù)再現(xiàn)功能單元的電話通信期間,如果期望在聆聽的同時(shí)選擇多個(gè)音樂數(shù)據(jù), 則可以對通信聲音和音樂數(shù)據(jù)執(zhí)行上述的聲音分離處理從而使得即使在通信期間也能夠作為預(yù)覽聆聽音樂數(shù)據(jù)并且進(jìn)行選擇。此外,本實(shí)施例可以用于包括聲音數(shù)據(jù)的運(yùn)動(dòng)圖像內(nèi)容。例如,通過運(yùn)動(dòng)圖像再現(xiàn)和本發(fā)明的方法的組合,可以在再現(xiàn)運(yùn)動(dòng)圖像的同時(shí)高效聆聽并選擇另一個(gè)運(yùn)動(dòng)圖像作為預(yù)覽。盡管觸摸面板用作用戶輸入單元18,但是替代它或者除它之外,例如,可以使用諸如鼠標(biāo)、鍵盤、軌跡球、按鈕、操縱桿或觸筆的至少一個(gè)輸入裝置。盡管在本實(shí)施例中虛擬聲源的位置限于水平平面內(nèi),但是可以在以頭部H為中心的三維空間中設(shè)置它。用于在計(jì)算機(jī)上實(shí)現(xiàn)在以上實(shí)施例中描述的功能的計(jì)算機(jī)程序和用于存儲(chǔ)該程序的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)包括在本發(fā)明中。用于提供程序的“存儲(chǔ)介質(zhì)”的例子包括磁存儲(chǔ)介質(zhì)(軟盤、硬盤、磁帶等)、光盤(磁光盤、CD、DVD等)、半導(dǎo)體存儲(chǔ)器等。本領(lǐng)域技術(shù)人員應(yīng)該明白,可以根據(jù)設(shè)計(jì)要求和其它因素想到各種變型、組合、子組合和替代,只要它們位于權(quán)利要求及其等同物的范圍內(nèi)即可。
權(quán)利要求
1.一種信息處理設(shè)備,包括存儲(chǔ)單元,被構(gòu)造為存儲(chǔ)多個(gè)音頻數(shù)據(jù);接口,被構(gòu)造為顯示與所述多個(gè)音頻數(shù)據(jù)中的每一個(gè)對應(yīng)的信息并且接收用于選擇所述多個(gè)音頻數(shù)據(jù)中的至少一個(gè)的輸入;再現(xiàn)單元,被構(gòu)造為同時(shí)再現(xiàn)多個(gè)音頻數(shù)據(jù);聲音處理單元,被構(gòu)造為處理由再現(xiàn)單元同時(shí)再現(xiàn)的多個(gè)音頻數(shù)據(jù);控制單元,被構(gòu)造為控制再現(xiàn)單元以再現(xiàn)多個(gè)音頻數(shù)據(jù)中的第一音頻數(shù)據(jù),基于在接口接收的輸入啟動(dòng)多個(gè)音頻數(shù)據(jù)中的第二音頻數(shù)據(jù)的同時(shí)再現(xiàn),并且控制聲音處理單元處理第一和第二音頻數(shù)據(jù)使得可被用戶分別聽見;以及輸出單元,被構(gòu)造為輸出從聲音處理單元輸出的第一和第二音頻數(shù)據(jù)。
2.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述接口是觸摸面板顯示器,該觸摸面板顯示器被構(gòu)造為接收觸摸輸入作為用于選擇所述多個(gè)音頻數(shù)據(jù)中的至少一個(gè)的輸入。
3.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述接口被構(gòu)造為顯示字符串作為與所述多個(gè)音頻數(shù)據(jù)中的每一個(gè)對應(yīng)的信息。
4.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述接口被構(gòu)造為顯示圖形圖像作為與所述多個(gè)音頻數(shù)據(jù)中的每一個(gè)對應(yīng)的信息。
5.根據(jù)權(quán)利要求2的信息處理設(shè)備,其中,所述控制單元被構(gòu)造為控制再現(xiàn)單元再現(xiàn)第一音頻數(shù)據(jù),并且基于檢測到在觸摸面板顯示處接收的與第二音頻數(shù)據(jù)對應(yīng)的持續(xù)觸摸輸入已經(jīng)超過預(yù)定時(shí)長,啟動(dòng)第二音頻數(shù)據(jù)的同時(shí)再現(xiàn)。
6.根據(jù)權(quán)利要求5的信息處理設(shè)備,其中,所述控制單元被構(gòu)造為基于檢測到在所述觸摸面板顯示處接收的持續(xù)觸摸輸入已經(jīng)結(jié)束,控制再現(xiàn)單元停止第二音頻數(shù)據(jù)的再現(xiàn)并且繼續(xù)第一音頻數(shù)據(jù)的再現(xiàn)。
7.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述控制單元被構(gòu)造為基于與第二音頻數(shù)據(jù)對應(yīng)的在所述接口接收的第二輸入,控制再現(xiàn)單元停止第一音頻數(shù)據(jù)的再現(xiàn)并且繼續(xù)第二音頻數(shù)據(jù)的再現(xiàn)。
8.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述輸出單元包括數(shù)字-模擬轉(zhuǎn)換器,該數(shù)字_模擬轉(zhuǎn)換器被構(gòu)造為將從聲音處理單元輸出的第一和第二音頻數(shù)據(jù)轉(zhuǎn)換成模擬信號。
9.根據(jù)權(quán)利要求8的信息處理設(shè)備,其中,所述輸出單元包括被構(gòu)造為放大所述模擬信號的放大器。
10.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述聲音處理單元包括預(yù)處理單元,該預(yù)處理單元被構(gòu)造為控制第一和第二音頻數(shù)據(jù)的增益以使之均衡。
11.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述聲音處理單元包括頻帶分割濾波器, 該頻帶分割濾波器被構(gòu)造為對第一和第二音頻數(shù)據(jù)執(zhí)行頻帶分割處理。
12.根據(jù)權(quán)利要求11的信息處理設(shè)備,其中,所述頻帶分割濾波器被構(gòu)造為將可聽見的頻帶分割成多個(gè)頻帶并且將這多個(gè)頻帶中的每一個(gè)獨(dú)占地分配給第一和第二音頻數(shù)據(jù)之一。
13.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述聲音處理單元包括時(shí)間分割濾波器, 該時(shí)間分割濾波器被構(gòu)造為對第一和第二音頻數(shù)據(jù)執(zhí)行時(shí)間分割處理。
14.根據(jù)權(quán)利要求13的信息處理設(shè)備,其中,所述時(shí)間分割濾波器被構(gòu)造為對第一和第二音頻數(shù)據(jù)中的每一個(gè)的幅值進(jìn)行調(diào)制從而使得幅值調(diào)制后的第一音頻數(shù)據(jù)最大的時(shí)間點(diǎn)與幅值調(diào)制后的第二音頻數(shù)據(jù)最小的時(shí)間點(diǎn)重疊。
15.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述聲音處理單元包括處理濾波器,該處理濾波器被構(gòu)造為對第一和第二音頻數(shù)據(jù)中的至少一個(gè)應(yīng)用預(yù)定處理效果。
16.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述聲音處理單元還包括定位濾波器,該定位濾波器被構(gòu)造為處理第一和第二音頻數(shù)據(jù)以區(qū)分與第一和第二音頻數(shù)據(jù)中的每一個(gè)對應(yīng)的聲源的察覺方向。
17.一種由信息處理設(shè)備執(zhí)行的信息處理方法,該方法包括存儲(chǔ)多個(gè)音頻數(shù)據(jù);在信息處理設(shè)備的接口顯示與所述多個(gè)音頻數(shù)據(jù)中的每一個(gè)對應(yīng)的信息;在所述接口接收用于選擇所述多個(gè)音頻數(shù)據(jù)中的至少一個(gè)的輸入;再現(xiàn)所述多個(gè)音頻數(shù)據(jù)中的第一音頻數(shù)據(jù),并且基于在所述接口接收的輸入啟動(dòng)所述多個(gè)音頻數(shù)據(jù)中的第二音頻數(shù)據(jù)的同時(shí)再現(xiàn);處理第一和第二音頻數(shù)據(jù)從而使得第一和第二音頻數(shù)據(jù)可被用戶分別聽見;以及輸出處理后的第一和第二音頻數(shù)據(jù)。
18.根據(jù)權(quán)利要求17的信息處理方法,其中,所述接口是觸摸面板顯示器并且接收觸摸輸入作為用于選擇所述多個(gè)音頻數(shù)據(jù)中的至少一個(gè)的輸入。
19.根據(jù)權(quán)利要求17的信息處理方法,其中,所述顯示包括顯示字符串或圖形圖像作為與所述多個(gè)音頻數(shù)據(jù)中的每一個(gè)對應(yīng)的信息。
全文摘要
本發(fā)明涉及聲音處理裝置、聲音數(shù)據(jù)選擇方法和聲音數(shù)據(jù)選擇程序。該信息處理設(shè)備存儲(chǔ)多個(gè)音頻數(shù)據(jù),顯示與所述多個(gè)音頻數(shù)據(jù)中的每一個(gè)對應(yīng)的信息,接收用于選擇所述多個(gè)音頻數(shù)據(jù)中的至少一個(gè)的輸入,再現(xiàn)所述多個(gè)音頻數(shù)據(jù)中的第一音頻數(shù)據(jù),并且基于在接口接收的輸入啟動(dòng)所述多個(gè)音頻數(shù)據(jù)中的第二音頻數(shù)據(jù)的同時(shí)再現(xiàn),處理第一和第二音頻數(shù)據(jù)以使得用戶可以分別聽見第一和第二音頻數(shù)據(jù),并且輸出處理后的第一和第二音頻數(shù)據(jù)。
文檔編號G11B27/031GK102419997SQ20111019611
公開日2012年4月18日 申請日期2011年7月14日 優(yōu)先權(quán)日2010年9月28日
發(fā)明者小坂純一, 山下功誠, 許德正 申請人:索尼公司, 索尼愛立信移動(dòng)通信日本株式會(huì)社