本公開整體涉及包括一個(gè)或多個(gè)揚(yáng)聲器和一個(gè)或多個(gè)圖像傳感器的設(shè)備。
背景技術(shù):
1、各種耳戴式設(shè)備諸如耳機(jī)或耳塞包括向用戶輸出聲音的揚(yáng)聲器。各種頭戴式設(shè)備諸如雙耳式耳機(jī)或擴(kuò)展現(xiàn)實(shí)(xr)頭戴式耳機(jī)可類似地包括揚(yáng)聲器。
技術(shù)實(shí)現(xiàn)思路
1、本文所公開的各種具體實(shí)施包括用于播放音頻數(shù)據(jù)的設(shè)備、系統(tǒng)和方法。在各種具體實(shí)施中,方法由包括被配置用于插入到外耳中的框架、耦接到框架的揚(yáng)聲器、耦接到框架的圖像傳感器、一個(gè)或多個(gè)處理器和非暫態(tài)存儲(chǔ)器的設(shè)備執(zhí)行。該方法包括使用圖像傳感器捕獲物理環(huán)境的一個(gè)或多個(gè)圖像。該方法包括基于物理環(huán)境的一個(gè)或多個(gè)圖像生成音頻數(shù)據(jù)。該方法包括經(jīng)由揚(yáng)聲器播放音頻數(shù)據(jù)。
2、根據(jù)一些具體實(shí)施,一種設(shè)備包括被配置用于插入到外耳中的框架。該設(shè)備包括耦接到框架的一個(gè)或多個(gè)處理器。該設(shè)備包括耦接到框架并且被配置為基于從一個(gè)或多個(gè)處理器接收的音頻數(shù)據(jù)來輸出聲音的揚(yáng)聲器。該設(shè)備包括圖像傳感器,圖像傳感器耦接到框架并且被配置為將物理環(huán)境的一個(gè)或多個(gè)圖像提供給一個(gè)或多個(gè)處理器。該一個(gè)或多個(gè)處理器被配置為基于物理環(huán)境的一個(gè)或多個(gè)圖像來生成音頻數(shù)據(jù)。
3、根據(jù)一些具體實(shí)施,一種設(shè)備包括一個(gè)或多個(gè)處理器、非暫態(tài)存儲(chǔ)器以及一個(gè)或多個(gè)程序;一個(gè)或多個(gè)程序被存儲(chǔ)于非暫態(tài)存儲(chǔ)器中并且被配置為由一個(gè)或多個(gè)處理器執(zhí)行。一個(gè)或多個(gè)程序包括用于執(zhí)行或促使執(zhí)行本文描述的任何方法的指令。根據(jù)一些具體實(shí)施,一種非暫態(tài)計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中存儲(chǔ)有指令,這些指令在由設(shè)備的一個(gè)或多個(gè)處理器執(zhí)行時(shí)使該設(shè)備執(zhí)行或使執(zhí)行本文所述方法中的任一者。根據(jù)一些具體實(shí)施,一種設(shè)備包括:一個(gè)或多個(gè)處理器、非暫態(tài)存儲(chǔ)器以及用于執(zhí)行或使執(zhí)行本文所述方法中的任一者的構(gòu)件。
1.一種方法,包括:
2.根據(jù)權(quán)利要求1所述的方法,其中基于所述物理環(huán)境的所述一個(gè)或多個(gè)圖像生成所述音頻數(shù)據(jù)包括向外圍設(shè)備發(fā)送所述物理環(huán)境的所述一個(gè)或多個(gè)圖像以及從所述外圍設(shè)備接收所述音頻數(shù)據(jù)。
3.根據(jù)權(quán)利要求1或2所述的方法,其中生成所述音頻數(shù)據(jù)包括創(chuàng)建音頻信號(hào)。
4.根據(jù)權(quán)利要求1或2所述的方法,其中生成所述音頻數(shù)據(jù)包括改變音頻流。
5.根據(jù)權(quán)利要求1至4中任一項(xiàng)所述的方法,其中所述設(shè)備還包括麥克風(fēng),所述麥克風(fēng)被配置為生成環(huán)境聲音數(shù)據(jù),并且其中生成所述音頻數(shù)據(jù)進(jìn)一步基于所述環(huán)境聲音數(shù)據(jù)。
6.根據(jù)權(quán)利要求5所述的方法,其中所述環(huán)境聲音數(shù)據(jù)包括語音輸入。
7.根據(jù)權(quán)利要求1至4中任一項(xiàng)所述的方法,其中所述設(shè)備還包括麥克風(fēng),所述麥克風(fēng)被配置為生成環(huán)境聲音數(shù)據(jù),并且其中生成所述音頻數(shù)據(jù)是獨(dú)立于所述環(huán)境聲音數(shù)據(jù)的。
8.根據(jù)權(quán)利要求1至7中任一項(xiàng)所述的方法,其中所述設(shè)備還包括被配置為生成姿態(tài)數(shù)據(jù)的慣性測量單元(imu),并且其中生成所述音頻數(shù)據(jù)進(jìn)一步基于所述姿態(tài)數(shù)據(jù)。
9.根據(jù)權(quán)利要求1至8中任一項(xiàng)所述的方法,其中所述音頻數(shù)據(jù)在空間上從基于所述環(huán)境的所述一個(gè)或多個(gè)圖像的位置播放。
10.根據(jù)權(quán)利要求1至9中任一項(xiàng)所述的方法,其中所述圖像傳感器具有與用戶視場不同的設(shè)備視場,并且所述音頻數(shù)據(jù)是基于所述物理環(huán)境的所述一個(gè)或多個(gè)圖像的在所述用戶視場之外的部分。
11.一種設(shè)備,包括:
12.根據(jù)權(quán)利要求1所述的設(shè)備,其中所述一個(gè)或多個(gè)處理器被配置為通過向外圍設(shè)備發(fā)送所述物理環(huán)境的所述一個(gè)或多個(gè)圖像并且從所述外圍設(shè)備接收所述音頻數(shù)據(jù)來基于所述環(huán)境的所述一個(gè)或多個(gè)圖像生成所述音頻數(shù)據(jù)。
13.根據(jù)權(quán)利要求11或12所述的設(shè)備,其中所述一個(gè)或多個(gè)處理器被配置為通過創(chuàng)建音頻信號(hào)來生成所述音頻數(shù)據(jù)。
14.根據(jù)權(quán)利要求11或12所述的設(shè)備,其中所述一個(gè)或多個(gè)處理器被配置為通過改變音頻流來生成所述音頻數(shù)據(jù)。
15.根據(jù)權(quán)利要求11至14中任一項(xiàng)所述的設(shè)備,還包括被配置為生成環(huán)境聲音數(shù)據(jù)的麥克風(fēng),其中所述一個(gè)或多個(gè)處理器被配置為進(jìn)一步基于所述環(huán)境聲音數(shù)據(jù)生成所述音頻數(shù)據(jù)。
16.根據(jù)權(quán)利要求15所述的設(shè)備,其中所述環(huán)境聲音數(shù)據(jù)包括語音輸入。
17.根據(jù)權(quán)利要求11至14中任一項(xiàng)所述的設(shè)備,還包括被配置為生成環(huán)境聲音數(shù)據(jù)的麥克風(fēng),其中所述一個(gè)或多個(gè)處理器被配置為獨(dú)立于所述環(huán)境聲音數(shù)據(jù)而生成所述音頻數(shù)據(jù)。
18.根據(jù)權(quán)利要求11至17中任一項(xiàng)所述的設(shè)備,還包括被配置為生成姿態(tài)數(shù)據(jù)的慣性測量單元(imu),其中所述一個(gè)或多個(gè)處理器被配置為進(jìn)一步基于所述姿態(tài)數(shù)據(jù)來生成所述音頻數(shù)據(jù)。
19.根據(jù)權(quán)利要求11至18中任一項(xiàng)所述的設(shè)備,其中所述音頻數(shù)據(jù)在空間上從基于所述環(huán)境的所述一個(gè)或多個(gè)圖像的位置播放。
20.根據(jù)權(quán)利要求11至19中任一項(xiàng)所述的設(shè)備,其中所述圖像傳感器具有與用戶視場不同的設(shè)備視場,并且所述音頻數(shù)據(jù)是基于所述物理環(huán)境的所述一個(gè)或多個(gè)圖像的在所述用戶視場之外的部分。
21.根據(jù)權(quán)利要求11至20中任一項(xiàng)所述的設(shè)備,其中所述圖像傳感器包括魚眼鏡頭。
22.根據(jù)權(quán)利要求11至21中任一項(xiàng)所述的設(shè)備,其中所述框架沒有物理地耦接到顯示器。
23.一種設(shè)備,包括:
24.一種存儲(chǔ)一個(gè)或多個(gè)程序的非暫態(tài)存儲(chǔ)器,所述一個(gè)或多個(gè)程序當(dāng)被包括被配置用于插入到外耳中的框架、耦接到所述框架的揚(yáng)聲器、和耦接到所述框架的圖像傳感器的設(shè)備的一個(gè)或多個(gè)處理器執(zhí)行時(shí)使得所述設(shè)備執(zhí)行根據(jù)權(quán)利要求1至10所述的方法中的任一種方法。
25.一種設(shè)備,包括: