本發(fā)明屬于遠(yuǎn)程音視頻會(huì)議領(lǐng)域，特別涉及一種全息聲場遠(yuǎn)程會(huì)議系統(tǒng)。

背景技術(shù)：

隨著互聯(lián)網(wǎng)技術(shù)的發(fā)展，遠(yuǎn)程會(huì)議系統(tǒng)越來越得到公司的青睞，但是目前的遠(yuǎn)程會(huì)議系統(tǒng)中的音頻傳輸依然是基于傳統(tǒng)的電話音頻標(biāo)準(zhǔn)或者是單聲道/立體聲音頻，雖然也出現(xiàn)了一些利用傳聲器陣列或是人工頭進(jìn)行全息聲場傳輸?shù)南到y(tǒng)，但是這些系統(tǒng)結(jié)構(gòu)復(fù)雜，成本高昂，在多個(gè)會(huì)場同時(shí)存在的場合，聲場容易產(chǎn)生混亂，與會(huì)者的沉浸感不佳，難以獲得真實(shí)的聽覺感受。

技術(shù)實(shí)現(xiàn)要素：

為了克服現(xiàn)有技術(shù)的缺陷，本發(fā)明提出一種全息聲場遠(yuǎn)程會(huì)議系統(tǒng)，利用雙耳錄音耳機(jī)配合移動(dòng)終端及服務(wù)器，并選取適當(dāng)?shù)穆晥龇峙渌惴?，解決了全息聲場遠(yuǎn)程會(huì)議的聲場浸入問題，顯著提升了與會(huì)者的聽覺體驗(yàn)。

提出了一種全息聲場遠(yuǎn)程會(huì)議系統(tǒng)，包括：會(huì)議服務(wù)器、多臺(tái)移動(dòng)終端、多個(gè)雙耳錄音耳機(jī)，每一個(gè)會(huì)場中放置一臺(tái)移動(dòng)終端，移動(dòng)終端與會(huì)議服務(wù)器間通過第一鏈路相連；雙耳錄音耳機(jī)與會(huì)場中的移動(dòng)終端通過第二鏈路相連；其特征在于，會(huì)場中的每個(gè)與會(huì)人員均佩戴雙耳錄音耳機(jī)，通過該耳機(jī)拾取全息聲場信號(hào)經(jīng)由移動(dòng)終端上行發(fā)送到會(huì)議服務(wù)器，再由會(huì)議服務(wù)器將全息聲場信號(hào)轉(zhuǎn)發(fā)給其他會(huì)場，并且由移動(dòng)終端接收由會(huì)議服務(wù)器下行轉(zhuǎn)發(fā)的全息聲場信號(hào)，再將該信號(hào)發(fā)送至?xí)鰞?nèi)的雙耳錄音耳機(jī)，由該耳機(jī)重放其他會(huì)場的全息聲場信號(hào)給與會(huì)人員；所述的雙耳錄音包括兩側(cè)的揚(yáng)聲器及傳聲器，將該耳機(jī)佩戴在用戶耳朵上時(shí)，揚(yáng)聲器位于相對(duì)靠近鼓膜側(cè)，傳聲器位于相對(duì)遠(yuǎn)離鼓膜側(cè)，兩側(cè)的傳聲器用于拾取全息聲場信號(hào)，兩側(cè)的揚(yáng)聲器用于重放全息聲場信號(hào)。

如果會(huì)議室中接入移動(dòng)終端的雙耳錄音耳機(jī)有多個(gè)，即有多個(gè)與會(huì)者的情況下，設(shè)定其中某一個(gè)人為該會(huì)場的主席(President)，在該會(huì)議室中，移動(dòng)終端將主席的雙耳錄音耳機(jī)拾取的全息聲場信號(hào)作為該會(huì)場的上行聲場信號(hào)發(fā)送至服務(wù)器；如果會(huì)議室中接入終端的雙耳錄音耳機(jī)只有一個(gè)，即只有一個(gè)與會(huì)者的情況下，移動(dòng)終端直接將雙耳錄音耳機(jī)拾取的包括與會(huì)者語音在內(nèi)的雙耳信號(hào)作為該會(huì)場的上行聲場進(jìn)行發(fā)送；如果會(huì)議室中接入終端的雙耳錄音耳機(jī)只有一個(gè)，即只有一個(gè)與會(huì)者的情況下，移動(dòng)終端將包括與會(huì)者語音在內(nèi)的雙耳信號(hào)合并成單聲道(MONO)信號(hào)，并將該單聲道信號(hào)渲染到虛擬聲場中的特定位置；其中，根據(jù)該會(huì)場移動(dòng)終端的地理方位來進(jìn)行渲染或是采用隨機(jī)選取空間方位的方式來進(jìn)行渲染；其中，渲染方式包括將該單聲道信號(hào)利用頭相關(guān)傳輸函數(shù)HRTF或雙耳房間脈沖響應(yīng)BRIR進(jìn)行信號(hào)卷積。

會(huì)議服務(wù)器將來自各個(gè)會(huì)場的聲場信號(hào)進(jìn)行分配轉(zhuǎn)發(fā)，將除本會(huì)場之外的其他會(huì)場的聲場信號(hào)下行轉(zhuǎn)發(fā)至該會(huì)場的移動(dòng)終端，或者會(huì)議服務(wù)器將來自各個(gè)會(huì)場的聲場信號(hào)進(jìn)行加和后直接下行發(fā)送至每個(gè)會(huì)場內(nèi)的移動(dòng)終端，由移動(dòng)終端減去本會(huì)場的聲場信號(hào)后再發(fā)送給會(huì)場內(nèi)的雙耳錄音耳機(jī)；其中，在進(jìn)行聲場信號(hào)的減法時(shí)，需要進(jìn)行時(shí)域匹配處理。

其中，由移動(dòng)終端對(duì)一個(gè)或多個(gè)雙耳錄音耳機(jī)進(jìn)行下行聲場信號(hào)的發(fā)送時(shí)，包括藍(lán)牙分享方式、FM廣播方式。

其中，與會(huì)者使用雙耳錄音耳機(jī)通過與移動(dòng)終端交互的方式從移動(dòng)終端處獲取接入移動(dòng)終端以加入會(huì)議的許可及獲取無線信道資源；所述交互的方式包括使用移動(dòng)終端掃描雙耳錄音耳機(jī)上的二維碼、利用設(shè)置于雙耳錄音與移動(dòng)終端內(nèi)的近場通訊(NFC)模塊進(jìn)行近場通訊。

進(jìn)一步的，雙耳錄音耳機(jī)中還設(shè)置有監(jiān)聽回路；移動(dòng)中終端包括手機(jī)、膝上型計(jì)算機(jī)、平板電腦。

附圖說明

圖1為本發(fā)明的全息聲場遠(yuǎn)程會(huì)議系統(tǒng)的示意圖

具體實(shí)施方式

結(jié)合附圖，對(duì)本發(fā)明的全息聲場遠(yuǎn)程會(huì)議系統(tǒng)進(jìn)行詳細(xì)說明。如附圖1所示，本發(fā)明的全息聲場遠(yuǎn)程會(huì)議系統(tǒng)包括會(huì)議服務(wù)器1、多臺(tái)移動(dòng)終端2、多個(gè)雙耳錄音耳機(jī)3，每一個(gè)會(huì)場中放置一臺(tái)移動(dòng)終端2，移動(dòng)終端2與會(huì)議服務(wù)器1間通過第一鏈路相連，該第一鏈路包括有線或無線連接；雙耳錄音耳機(jī)3與會(huì)場中的移動(dòng)終端2通過第二鏈路相連，第二鏈路為有線或無線鏈路；會(huì)場中的每個(gè)與會(huì)人員均佩戴雙耳錄音耳機(jī)3，通過該耳機(jī)3拾取全息聲場信號(hào)經(jīng)由移動(dòng)終端2上行發(fā)送到會(huì)議服務(wù)器1，再由會(huì)議服務(wù)器1將該全息聲場信號(hào)轉(zhuǎn)發(fā)給其他會(huì)場，并且由移動(dòng)終端2接收由會(huì)議服務(wù)器1下行轉(zhuǎn)發(fā)的全息聲場信號(hào)，再將該信號(hào)發(fā)送至?xí)鰞?nèi)的雙耳錄音耳機(jī)3，由該耳機(jī)3重放其他會(huì)場的全息聲場信號(hào)給與會(huì)人員。

附圖1中D會(huì)場示出了一個(gè)雙耳錄音耳機(jī)3的放大圖，該耳機(jī)3包括兩側(cè)的揚(yáng)聲器31及傳聲器32，將該耳機(jī)3佩戴在用戶耳朵上時(shí)，揚(yáng)聲器31位于相對(duì)靠近鼓膜側(cè)，傳聲器32位于相對(duì)遠(yuǎn)離鼓膜側(cè)，兩側(cè)的傳聲器32用于拾取全息聲場信號(hào)，兩側(cè)的揚(yáng)聲器31用于重放全息聲場信號(hào)。

對(duì)于由各會(huì)議室的移動(dòng)終端2至?xí)h服務(wù)器1的上行聲場而言，如果會(huì)議室中接入移動(dòng)終端2的雙耳錄音耳機(jī)3有多個(gè)(如附圖1中的會(huì)場A、D)，即有多個(gè)與會(huì)者的情況下，設(shè)定其中某一個(gè)人為該會(huì)場的主席(President)，設(shè)定方式可以是人為指定或根據(jù)接入移動(dòng)終端2的先后順序來確定或是其他方式確定，在會(huì)議進(jìn)行中，也可根據(jù)需要改變主席的設(shè)定，在該會(huì)議室中，移動(dòng)終端2只將主席的雙耳錄音耳機(jī)3拾取的全息聲場信號(hào)作為該會(huì)場的上行聲場信號(hào)發(fā)送至服務(wù)器；如果會(huì)議室中接入終端2的雙耳錄音耳機(jī)3只有一個(gè)(如附圖1中的會(huì)場B、C)，即只有一個(gè)與會(huì)者的情況下，可以通過三種方式進(jìn)行該會(huì)議室聲場的上行發(fā)送，第一種方式為移動(dòng)終端2直接將雙耳錄音耳機(jī)3拾取的包括與會(huì)者語音在內(nèi)的雙耳信號(hào)作為該會(huì)場的上行聲場進(jìn)行發(fā)送；第二種方式為由移動(dòng)終端2將包括與會(huì)者語音在內(nèi)的雙耳信號(hào)合并成單聲道(MONO)信號(hào)，基于移動(dòng)終端2的地理位置將該單聲道信號(hào)渲染到虛擬聲場中的某個(gè)位置，例如可以根據(jù)該會(huì)場移動(dòng)終端2相對(duì)會(huì)議發(fā)起方或其他參考位置的地理方位來進(jìn)行渲染；第三種方式為由移動(dòng)終端2將包括與會(huì)者語音在內(nèi)的雙耳信號(hào)合并成單聲道(MONO)信號(hào)，由移動(dòng)終端2采用隨機(jī)選取空間方位的方式來對(duì)該單聲道信號(hào)渲染至虛擬聲場中，其中可以根據(jù)該會(huì)場接入會(huì)議服務(wù)器1的時(shí)間先后順序來進(jìn)行隨機(jī)空間方位選取，例如接入系統(tǒng)較晚的會(huì)渲染到更偏或更遠(yuǎn)的位置。所述的渲染方式包括但不限于將該單聲道信號(hào)利用HRTF(頭相關(guān)傳輸函數(shù))或BRIR(雙耳房間脈沖響應(yīng))進(jìn)行信號(hào)卷積。

對(duì)于由會(huì)議服務(wù)器1到各會(huì)議室的移動(dòng)終端2的下行聲場而言，有兩種方式進(jìn)行下行聲場的發(fā)送：以附圖1中的情形為例，第一種方式，由會(huì)議服務(wù)器1將來自A、B、C、D四個(gè)會(huì)場的聲場信號(hào)進(jìn)行分配轉(zhuǎn)發(fā)，以A會(huì)場為例，由會(huì)議服務(wù)器1將B+C+D的聲場信號(hào)下行發(fā)送至A會(huì)場的移動(dòng)終端2，再由移動(dòng)終端2轉(zhuǎn)發(fā)至?xí)龅碾p耳錄音耳機(jī)3，其他會(huì)場同理，會(huì)議服務(wù)器1發(fā)送除某會(huì)場以外的其他會(huì)場的聲場信號(hào)至該會(huì)場；第二種方式，為了減少會(huì)議服務(wù)器1的負(fù)荷以及提高網(wǎng)絡(luò)效率，由會(huì)議服務(wù)器1將來自A、B、C、D四個(gè)會(huì)場的聲場信號(hào)進(jìn)行加和后直接下行發(fā)送至每個(gè)會(huì)場內(nèi)的移動(dòng)終端2，由移動(dòng)終端2減去本會(huì)場的聲場信號(hào)后再發(fā)送給會(huì)場內(nèi)的雙耳錄音耳機(jī)3，需要注意的是，在進(jìn)行聲場信號(hào)的減法時(shí)，需要進(jìn)行時(shí)域匹配處理，例如對(duì)信號(hào)進(jìn)行相應(yīng)的延時(shí)處理。

進(jìn)一步，在各會(huì)場內(nèi)由移動(dòng)終端2對(duì)一個(gè)或多個(gè)雙耳錄音耳機(jī)3進(jìn)行下行聲場信號(hào)的發(fā)送時(shí)，當(dāng)為無線連接時(shí)，包括藍(lán)牙分享方式、FM廣播、紅外廣播方式；當(dāng)會(huì)場內(nèi)有多名與會(huì)者的情況下，與會(huì)者可使用雙耳錄音耳機(jī)3通過與移動(dòng)終端2交互的方式從移動(dòng)終端2處獲取接入移動(dòng)終端2以加入會(huì)議的許可及獲取無線信道資源，所述交互的方式包括但不限于使用移動(dòng)終端2掃描雙耳錄音耳機(jī)3上的二維碼、利用設(shè)置于雙耳錄音3與移動(dòng)終端2內(nèi)的近場通訊(NFC)模塊進(jìn)行近場通訊。

進(jìn)一步的，考慮到當(dāng)雙耳錄音耳機(jī)3佩戴于與會(huì)者后會(huì)阻塞本會(huì)場聲音的獲取，在該雙耳錄音耳機(jī)3中還設(shè)置有監(jiān)聽回路，即由傳聲器32拾取的信號(hào)直接能夠發(fā)送至揚(yáng)聲器31進(jìn)行播放，使得與會(huì)者不僅能夠收聽其他會(huì)場的聲場信號(hào)也不影響本會(huì)場的聲場獲取。

其中，移動(dòng)中終端2包括但不限于手機(jī)、膝上型計(jì)算機(jī)、平板電腦；雙耳錄音耳機(jī)3為頭戴式或耳塞式。

本領(lǐng)域技術(shù)人員能夠理解，在本發(fā)明基礎(chǔ)上的合理改進(jìn)均能夠納入本發(fā)明的保護(hù)范圍。