專利名稱：視頻圖像數(shù)據(jù)處理方法、裝置及視頻會議系統(tǒng)及終端的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及視頻控制技術(shù)領(lǐng)域，更具體地說，涉及一種視頻圖像數(shù)據(jù)處 理方法、裝置及視頻會議系統(tǒng)及終端。
背景技術(shù)：
隨著編碼和信息壓縮技術(shù)的發(fā)展以及數(shù)字網(wǎng)絡(luò)的高速發(fā)展，視頻會議系
統(tǒng)出現(xiàn)并步入市場，從上世紀(jì)90年代初期第一套關(guān)于^L頻會議系統(tǒng)的國際標(biāo) 準(zhǔn)(H.320)獲得通過并實施以來，視頻會議系統(tǒng)得到了越來越廣泛的應(yīng)用， 同時，其所提供的語音體驗、視頻體驗的需求也越來越受到關(guān)注。對于語音 體驗需求方面，將向著高保真語音重現(xiàn)方面演進，而視頻體驗需求方面將向 著高分辨率、寬視角方面演進。
現(xiàn)有的視頻會議電視系統(tǒng)中，由發(fā)送端的視頻會議終端采用單個高清攝 像頭進行圖像的捕獲，捕獲的高清視頻分辨率一般為720p30f、 720p60f、 1080i30f、 1080i60f、 1080p30f、 1080p60f等，然后，將捕獲的視頻進行壓縮 編碼，生成視頻碼流；接著，通過數(shù)據(jù)傳輸網(wǎng)絡(luò)，將視頻碼流傳送到接收端 的視頻會議終端；接收端的視頻會議終端對接收到的視頻碼流進行解碼，得 到發(fā)送端的高清視頻圖像，并顯示。
上述視頻會議終端能夠提供比標(biāo)清視頻會議終端更高的視頻分辨率，能 夠給用戶帶來更好的視覺體驗。但是，提供的視頻圖像視角比較有限。
思科公司的"網(wǎng)真"系統(tǒng)一定程度上解決了上述問題，該系統(tǒng)的結(jié)構(gòu)如圖1 所示，包括多臺視頻終端、各視頻終端配備一臺高清攝像頭，多臺攝像頭采 用嚴(yán)格物理位置擺放，以使得在采集到的多路視頻圖像在位于同 一水平面上 的多臺顯示"i殳備上進行顯示時，給觀看者的感覺是連續(xù)的。
然而，發(fā)明人發(fā)現(xiàn)，上述方案至少存在以下問題
該方案對會議室的裝修布局要求比較嚴(yán)格，尤其是對攝像機組的位置擺 放、使用者距離攝像機組間距離的大小都有及其嚴(yán)格的要求，否則，顯示設(shè)備上顯示的圖像將出現(xiàn)重疊的現(xiàn)象，這種嚴(yán)格要求使得系統(tǒng)的安裝過程比較復(fù)雜。

發(fā)明內(nèi)容
有鑒于此，本發(fā)明實施例提供一種視頻圖像數(shù)據(jù)處理方法、裝置及視頻會議系統(tǒng)及終端，以解決現(xiàn)有技術(shù)存在的系統(tǒng)安裝過程復(fù)雜的問題。
本發(fā)明實施例是這樣實現(xiàn)的
一種視頻圖像數(shù)據(jù)處理方法，包括
獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；
利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)；
將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)后，發(fā)送給顯示設(shè)備顯示。
一種視頻圖像數(shù)據(jù)處理裝置，包括
數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像
數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)；
數(shù)據(jù)重組單元，用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多
路視頻圖像數(shù)據(jù)；
多個數(shù)據(jù)輸出接口，與外部顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單元處理得到的視頻圖像數(shù)據(jù)傳輸給所述顯示設(shè)備。一種視頻圖像數(shù)據(jù)處理裝置，包括
數(shù)據(jù)輸入接口 ，用于獲取多臺攝像機采集的多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；
數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)；
ii數(shù)據(jù)重組單元，用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多
路視頻圖像數(shù)據(jù)；
數(shù)據(jù)發(fā)送單元，用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送給遠端的視頻會議設(shè)備，以使該視頻會議設(shè)備通過相應(yīng)的顯示設(shè)備顯示。
一種視頻圖像數(shù)據(jù)處理裝置，包括
數(shù)據(jù)輸入接口 ，用于獲取編碼后的多路視頻圖像數(shù)據(jù)；
多個數(shù)據(jù)解碼器，同時對編碼后的多路視頻圖像數(shù)據(jù)進行解碼，解碼后
的多路視頻圖像數(shù)據(jù)包含所述寬景視頻圖像分割成的多個子圖像及與其相對
應(yīng)的同步信息和重建信息；
數(shù)據(jù)同步單元，將所述解碼后的子圖像根據(jù)與其對應(yīng)的同步信息進行歸
類；
數(shù)據(jù)重建單元，根據(jù)所述重建信息對所述歸類后的子圖像進行重建，得到多路視頻圖像數(shù)據(jù)，其中各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列；
多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重建單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。一種^L頻會議系統(tǒng)，包括
數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像
數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；
數(shù)據(jù)發(fā)送單元，用于將所述寬景視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送；數(shù)據(jù)接收單元，用于接收承載于通信網(wǎng)絡(luò)的寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)重組單元，用于將所述數(shù)據(jù)接收單元接收的所述寬景視頻圖像數(shù)據(jù)
重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)；
多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單
元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。一種視頻會議系統(tǒng)，包括
數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)發(fā)送單元，用于將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息通過通信網(wǎng)絡(luò)發(fā)送；
數(shù)據(jù)接收單元，用于接收承載于通信網(wǎng)絡(luò)的所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；
數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；
數(shù)據(jù)重組單元，用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)；
多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。一種一見頻會議系統(tǒng)，包括
數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像
數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；
數(shù)據(jù)重組單元，用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多
路視頻圖像數(shù)據(jù)；
數(shù)據(jù)發(fā)送單元，用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送；
數(shù)據(jù)接收單元，用于接收承載于通信網(wǎng)絡(luò)的所述多路視頻圖像數(shù)據(jù)；
多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)接收單元接收到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
一種視頻會議終端，包括
數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)收發(fā)單元，用于將所述寬景視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送給遠端的視頻會議設(shè)備，以及，接收所述視頻會議設(shè)備通過所述通信網(wǎng)絡(luò)發(fā)送的單
路寬景視頻圖像數(shù)據(jù)；
數(shù)據(jù)重組單元，用于將所述數(shù)據(jù)收發(fā)單元接收到的寬景視頻圖像數(shù)據(jù)重
組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)；
多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
一種視頻會議終端，包括
數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；
數(shù)據(jù)收發(fā)單元，用于將所述多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息通過通信網(wǎng)絡(luò)發(fā)送給遠端的視頻會議設(shè)備，以及，接收所述視頻會議設(shè)備通過所述通信網(wǎng)絡(luò)發(fā)送的多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；
數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；
數(shù)據(jù)重組單元，用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多絲4見頻圖像數(shù)據(jù)；
多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
一種視頻會議終端，包括
數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；
數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；
數(shù)據(jù)重組單元，用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)；
數(shù)據(jù)收發(fā)單元，用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送給遠端的視頻會議設(shè)備，以及，接收所述視頻會議設(shè)備通過所述通信網(wǎng)絡(luò)發(fā)送的經(jīng)過重組得到的多路視頻圖像數(shù)據(jù)；多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)收發(fā)單元接收到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
從上述的技術(shù)方案可以看出，與現(xiàn)有技術(shù)相比，本發(fā)明實施例在獲取多個攝像機采集的多路視頻圖像數(shù)據(jù)之后，將多路視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)，并根據(jù)顯示需要重組成若干路視頻圖像數(shù)據(jù)進行顯示。此過程中，將多路視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)的操作可以消除各視頻圖像數(shù)據(jù)之間存在的重疊的情況，因此，能夠允許攝像機采集的各路視頻圖像數(shù)據(jù)之間存在重疊，降低了對攝像機擺放位置及使用者與攝像機組之間的距離的要求，簡化了系統(tǒng)的安裝復(fù)雜度。


為了更清楚地說明本發(fā)明實施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對實施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡單的介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實施例，對于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動性的前提下，還可以根據(jù)這些附圖獲得其他的附圖。
圖1為現(xiàn)有技術(shù)提供的視頻會議系統(tǒng)的結(jié)構(gòu)示意圖2為本發(fā)明實施例中關(guān)聯(lián)視頻圖像示意圖3為本發(fā)明實施例中對關(guān)聯(lián)視頻圖像進行組合的示意圖4為本發(fā)明實施例提供的一種視頻圖像數(shù)據(jù)處理方法的流程圖5a-圖5b為本發(fā)明實施例提供的一種視頻圖像數(shù)據(jù)處理方法中進行視
頻圖像數(shù)據(jù)重組的示意圖6為本發(fā)明實施例提供的一種視頻圖像數(shù)據(jù)處理方法中視頻圖像數(shù)據(jù)
發(fā)送過程示意圖7為本發(fā)明實施例提供的一種視頻圖像數(shù)據(jù)處理方法中視頻圖像數(shù)據(jù)接收過程示意圖8為本發(fā)明實施例提供的一種視頻圖像數(shù)據(jù)處理裝置的一種結(jié)構(gòu)示意
15圖9為本發(fā)明實施例提供的一種視頻圖像數(shù)據(jù)處理裝置的另一種結(jié)構(gòu)示
意圖io為本發(fā)明實施例提供的一種視頻圖像數(shù)據(jù)處理裝置的另 一種結(jié)構(gòu)示意圖11為本發(fā)明實施例提供的一種視頻圖像數(shù)據(jù)處理裝置的另一種結(jié)構(gòu)示意圖12為本發(fā)明實施例提供的一種視頻會議系統(tǒng)的一種結(jié)構(gòu)示意圖；圖13為本發(fā)明實施例提供的一種視頻會議系統(tǒng)的另一種結(jié)構(gòu)示意圖；圖14為本發(fā)明實施例提供的一種^L頻會i^系統(tǒng)的另一種結(jié)構(gòu)示意圖；圖15為本發(fā)明實施例提供的一種視頻會議終端的一種結(jié)構(gòu)示意圖；圖16為本發(fā)明實施例提供的一種視頻會議終端的另一種結(jié)構(gòu)示意圖；圖17為本發(fā)明實施例提供的一種視頻會議終端的另一種結(jié)構(gòu)示意圖；圖18為本發(fā)明實施例提供的一種視頻會議終端的另一種結(jié)構(gòu)示意圖。
具體實施例方式
本發(fā)明實施例提供了一種技術(shù)方案，可以提升用戶的視覺體驗，并且設(shè)備安裝簡單，無需考慮會議室裝修布局，通用性較好。
為了引用和清楚起見，本文中使用的^R術(shù)名詞、簡寫或縮寫總結(jié)如下
H.320, ITU-T Recommendation H.320 ， Narrow-band visual telephonesystems and terminal equipment,國際電信聯(lián)盟電信標(biāo)準(zhǔn)部指定的一種標(biāo)準(zhǔn)，此標(biāo)準(zhǔn)規(guī)定了基于窄帶交換系統(tǒng)上的多媒體通信系統(tǒng)；
H.323 ， ITU-T Recommendation H.323 , Packet-based MultimediaCommunications Systems ，國際電信聯(lián)盟電信標(biāo)準(zhǔn)部指定的 一種標(biāo)準(zhǔn)，此標(biāo)準(zhǔn)規(guī)定了基于包交換系統(tǒng)下的多媒體通信系統(tǒng)架構(gòu)；
IP, Internet Protocol,即網(wǎng)纟各協(xié)i義；
ISDN, Integrated Services Digital Network,即綜合月良務(wù)數(shù)字網(wǎng)；ITU-T , International Telecommunication Union TelecommunicationStandardization Sector,即國際電信聯(lián)盟電信標(biāo)準(zhǔn)部；RTP ， Real-time Transport Protocol ，實時傳^T協(xié)議；MCU, Multipoint Control Unit,多點控制單元；
UDP, User Datagram Protocol,用戶數(shù)據(jù)才艮協(xié)議；
YPbPr,亮度(Y)與色差(Pb/Pr);
DVI, Digital Visual Interface, tt字^L頻4妄口；
HDMI, High Definition Multimedia Interface,高清晰多J 某體接口 ；
VGA, Video Graphic Array，顯示繪圖陣列；
MPEG， Moving Pictures Experts Group,即動態(tài)圖^f象專家組，MPEGl、 MPEG2和MPEG4都是MPEG標(biāo)準(zhǔn)。
相互關(guān)聯(lián)的視頻圖像(為了方便描述，下文統(tǒng)稱為關(guān)聯(lián)視頻圖像)指 的是多個攝像機在同一場景中獲取的視頻圖像， 一般來說，由于攝像機擺設(shè) 位置相對隨意，因此這些圖像之間存在重疊區(qū)域，如圖2所示，陰影部分為 圖像21和圖像22的重疊區(qū)域，圖像21和圖像22屬于關(guān)聯(lián)圖像。
圖像組合，將多幅來自同一場景的小尺寸(小視角)圖像合成一幅大尺 寸(廣視角)的圖像；針對上述互相關(guān)聯(lián)的圖像，拼裝時將重疊區(qū)域進行處 理。例如，對2所示的圖像21和圖像22進行處理后，得到圖像23,如圖3 所示。
圖像重組，將一幅大尺寸的視頻圖像進行分割、濾波處理，形成多幅小 尺寸視頻圖像。
下面將結(jié)合本發(fā)明實施例中的附圖，對本發(fā)明實施例中的技術(shù)方案進行 清楚、完整地描述，顯然，所描述的實施例僅僅是本發(fā)明一部分實施例，而 不是全部的實施例。基于本發(fā)明中的實施例，本領(lǐng)域普通技術(shù)人員在沒有作 出創(chuàng)造性勞動前提下所獲得的所有其他實施例，都屬于本發(fā)明保護的范圍。
本發(fā)明實施例公開了 一種視頻圖像數(shù)據(jù)處理方法，通過將獲取的多路相 互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)，然后根據(jù)顯示需要， 將所述寬景視頻圖像數(shù)據(jù)重組成一路或多路(與顯示設(shè)備數(shù)量相等)視頻圖 像數(shù)據(jù)，由顯示設(shè)備進行顯示。
所述顯示設(shè)備數(shù)量可以為多臺，在將組合成的寬景視頻圖像數(shù)據(jù)重組成 多路視頻圖像數(shù)據(jù)后，可以分別發(fā)送給各臺顯示設(shè)備。顯示設(shè)備按照各路視頻圖像數(shù)據(jù)在所述寬景視頻圖像數(shù)據(jù)中的位置排列進行顯示，即可為用戶提
供寬視角的視覺體驗。具體過程如圖4所示，包括以下步驟
步驟S41、獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及各視頻圖像數(shù)據(jù)之間的關(guān) 聯(lián)信息。
所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)來自設(shè)置在同 一 場景中的多臺攝像 機，這些攝像機架設(shè)于該場景中的不同位置。
所述關(guān)聯(lián)信息包括用于指示所述視頻圖像數(shù)據(jù)的物理位置信息，及所 述視頻圖像數(shù)據(jù)被捕獲的時間戳信息。
步驟S42、依據(jù)所述關(guān)聯(lián)信息將所述多路視頻圖像數(shù)據(jù)組合成單路寬景視 頻圖像數(shù)據(jù)。
具體地，依據(jù)各路視頻圖像數(shù)據(jù)的物理位置及被捕獲的時間戳信息，將 各路視頻圖像數(shù)據(jù)進行組合，形成單路寬景視頻圖像數(shù)據(jù)。
步驟S43、將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像 數(shù)據(jù)。
針對顯示設(shè)備的數(shù)量、支持畫面的大小及支持的視頻圖像數(shù)據(jù)格式，將 寬景視頻圖像數(shù)據(jù)重組、濾波成相應(yīng)路數(shù)的視頻圖像數(shù)據(jù)。
步驟S44、將重組得到的各路視頻圖像數(shù)據(jù)分別發(fā)送給各顯示設(shè)備顯示。 如果顯示設(shè)備的數(shù)量為4個，如圖5a所示，分別為51a、 52a、 53a和54a， 將寬景視頻圖像數(shù)據(jù)按照顯示位置重組成4路，然后分別傳輸給對應(yīng)的顯示 設(shè)備顯示，于是，各顯示設(shè)備依照圖像在所述寬景視頻圖像數(shù)據(jù)中的位置排 列即可將顯示的圖像組成一幅廣視角的視頻圖像；如果顯示設(shè)備的數(shù)量為3 個，如圖5b所示，分別為51b、 52b和53b ，將寬景視頻圖像數(shù)據(jù)按照圖像 顯示位置重組成3路，然后分別傳輸給對應(yīng)的顯示設(shè)備顯示。另外，顯示設(shè) 備所支持的顯示畫面大小有可能不同，于是，在進行寬景視頻圖像數(shù)據(jù)重組 時，需要根據(jù)顯示設(shè)備所支持的顯示畫面大小將寬景視頻圖像數(shù)據(jù)重組成相 應(yīng)尺寸的視頻圖像數(shù)據(jù)，例如顯示設(shè)備支持HDMI視頻輸入接口，同時支持 1080p視頻格式，而寬景圖像的分辨率為4000*1080,則在進行寬景視頻圖像數(shù)據(jù)重組時，將寬景視頻圖像數(shù)據(jù)重組成濾波成兩路分辨率大小為1920*1080 的1080p的視頻圖像數(shù)據(jù)進行顯示較為合適。
需要說明的是，上述步驟S41中，獲取視頻圖像的視頻接口類型可以為 YPbPr接口、 DVI接口、 HDMI接口或VGA接口中的任意一種或幾種，也就 是說，各攝像機提供的視頻輸入接口可以相同，也可以不同。上述步驟S43 中，重組而成的視頻圖像數(shù)據(jù)格式與顯示設(shè)備支持的視頻圖像格式相一致， 根據(jù)顯示設(shè)備所支持視頻圖像格式而定。
另外需要說明的是，上述步驟S41中視頻輸入接口類型與步驟S44輸出 的視頻輸出接口類型可以相同(如視頻輸入接口類型為YPbPr接口，輸出視 頻接口類型也為YPbPr接口 )或不同(如視頻輸入接口類型為YPbPr接口 ， 輸出視頻接口類型可為HDMI接口 )。當(dāng)各顯示設(shè)備所支持的視頻接口類型、 視頻圖像數(shù)據(jù)格式不同時，在將單路寬景視頻圖像數(shù)據(jù)重組成多路視頻圖像 數(shù)據(jù)之后，還需要根據(jù)對應(yīng)顯示設(shè)備所支持的視頻接口類型、所支持的視頻 圖像格式，將所述各路視頻圖像數(shù)據(jù)分別進行格式轉(zhuǎn)換后，再發(fā)送給相應(yīng)顯 示設(shè)備。
本發(fā)明實施例在獲取多個攝像機采集的多路視頻圖像數(shù)據(jù)之后，將多路 視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)，根據(jù)顯示需要重組成若干路視 頻圖像數(shù)據(jù)，然后發(fā)送給顯示設(shè)備顯示。只需要將顯示設(shè)備按照視頻圖像在 所述寬景視頻圖像數(shù)據(jù)中的位置排列即可將顯示的視頻圖像組合成廣視角視 頻圖像，為用戶提供較好的視覺體驗。并且，本發(fā)明實施例將多路視頻圖像 數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)，由于在組合過程中可以消除各視頻圖像 數(shù)據(jù)之間存在的重疊情況，因此，可以允許各攝像機獲取的圖像存在重疊現(xiàn) 象，這意味著對攝像機擺放位置及使用者與攝像機組之間的距離沒有特別嚴(yán) 格的要求，降低了安裝攝像機的復(fù)雜度。
所述顯示設(shè)備也可以為具備適應(yīng)寬景視頻圖像數(shù)據(jù)的顯示設(shè)備，此時， 其數(shù)量可以為一臺，在將組合成的寬景視頻圖像數(shù)據(jù)重組成多路視頻圖像數(shù) 據(jù)后，將所述多路視頻圖像數(shù)據(jù)按照其在寬景視頻圖像數(shù)據(jù)中的位置分路發(fā) 送給所述顯示設(shè)備，由該顯示設(shè)備將各路視頻圖像組合成寬景視頻圖像數(shù)據(jù)
19后進行顯示。本發(fā)明實施例可以應(yīng)用于遠程寬景視頻會議過程，參加會議各
方都可以將本方視頻圖像數(shù)據(jù)發(fā)送給對方(即視頻圖像數(shù)據(jù)發(fā)送過程)， 并接收對方發(fā)送的視頻圖像數(shù)據(jù)并顯示(即視頻圖像數(shù)據(jù)接收過程)。
所述視頻圖像數(shù)據(jù)發(fā)送過程可以如圖6所示，包括以下步驟
步驟S61、獲取架設(shè)在本方會場的多臺攝像機采集的視頻圖像數(shù)據(jù)及各視 頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息。
其中，各臺攝像機架設(shè)位置不同，但獲取的視頻圖像數(shù)據(jù)相互關(guān)聯(lián)，所 述關(guān)聯(lián)信息包括各視頻圖像數(shù)據(jù)的物理位置及獲取時間戳。
步驟S62、依據(jù)各視頻圖像數(shù)據(jù)的物理位置及獲取時間戳，將多路視頻圖 像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)。
步驟S63、將所述寬景視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送。
本技術(shù)領(lǐng)域人員可以理解，在上述步驟S61中多臺攝像機采集的視頻圖 像數(shù)據(jù)及各視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息的獲取過程是同時進行的，毋庸置疑， 為了讓多個顯示器前的用戶能夠看到攝像機前同 一時間的畫面，必須保證多 個攝像機同步采集場景圖像。另外，為了保證所傳輸?shù)囊曨l圖像的完整性， 必須保證相鄰的攝像機拍攝的場景不能有脫離的現(xiàn)象，最好有重疊區(qū)域，在 圖像組合過程中可以消除所述重疊區(qū)域。
本實施例中，所述通信網(wǎng)絡(luò)的網(wǎng)^^矣口可以是基于電路交換的ISDN、 El接口、 V35接口、基于包交換的以太網(wǎng)接口或基于無線連接的無線端口等。
與上述視頻圖像發(fā)送過程相對應(yīng)，所述視頻圖像數(shù)據(jù)接收過程可以如圖7 所示，包括以下步驟 ，
步驟S71、從通信網(wǎng)絡(luò)獲取發(fā)自對方會場的寬景視頻圖像數(shù)據(jù)。
步驟S72、將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像 數(shù)據(jù)。
步驟S73、將各路視頻圖像發(fā)送給相應(yīng)顯示設(shè)備顯示。
在其他實施例中，所述視頻圖像數(shù)據(jù)發(fā)送過程也可以是在獲取多路視 頻圖像數(shù)據(jù)及各視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息后，直接通過通信網(wǎng)絡(luò)發(fā)送。相 應(yīng)地，所述視頻圖像數(shù)據(jù)接收過程為接收所述多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息后，依據(jù)所述關(guān)聯(lián)信息將多路視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)， 根據(jù)顯示設(shè)備的數(shù)量，將所述寬景視頻圖像數(shù)據(jù)重組成多路視頻圖像數(shù)據(jù)后 發(fā)送給相應(yīng)顯示設(shè)備顯示。需要說明的是，這些實施例中，所述多路視頻圖 像數(shù)據(jù)間的關(guān)聯(lián)信息可以嵌入視頻圖像數(shù)據(jù)(或者經(jīng)過壓縮的視頻圖像數(shù)據(jù)) 中進行傳輸，例如，當(dāng)所述通信網(wǎng)絡(luò)為以太網(wǎng)時，所述關(guān)聯(lián)信息可以被嵌入 在視頻RTP包中進行傳輸，此方式有利于關(guān)聯(lián)信息與視頻圖像數(shù)據(jù)同步。當(dāng) 然，所述關(guān)聯(lián)信息也可以單獨傳輸，例如通過獨立數(shù)據(jù)通道傳輸。
在其他實施例中，所述視頻圖像數(shù)據(jù)發(fā)送過程還可以是獲取多路視頻 圖像數(shù)據(jù)及各視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息后，依據(jù)所述關(guān)聯(lián)信息將多路視頻 圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)，根據(jù)顯示設(shè)備(對方會場的顯示設(shè) 備)的數(shù)量，將所述寬景視頻圖像數(shù)據(jù)重組成多路視頻圖像數(shù)據(jù)后，通過通 信網(wǎng)絡(luò)發(fā)送。相應(yīng)地，所述視頻圖像數(shù)據(jù)接收過程為通過接收所述重組得 到的多路視頻圖像數(shù)據(jù)，直接發(fā)送給本方會場的顯示設(shè)備顯示。
此外，上述實施例中，發(fā)送端發(fā)送的寬景視頻圖像數(shù)據(jù)的方式可以是直 接發(fā)送，也可以是通過編碼后發(fā)送。所述編碼方式可以是H.261、 H.263、 H.264、 MPEG1、 MPEG2或MPEG4。相應(yīng)的，接收端接收的寬景視頻圖像數(shù) 據(jù)可以是沒有經(jīng)過編碼的原始數(shù)據(jù)，也可以是經(jīng)過編碼的數(shù)據(jù)。需要說明的 是，組合后的圖像的尺寸一般情況下是原始圖像的尺寸的幾倍，這種情況下， 即便采用編碼器進行編碼，其傳輸?shù)臄?shù)據(jù)量仍然是比較大的，這對編碼器的 能力提出了苛刻的要求?；诖?，本發(fā)明另外實施例采用多個編碼器并列處 理的方式，另外，，由于圖像數(shù)據(jù)的隨機性，經(jīng)過編碼之后的數(shù)據(jù)順序已經(jīng)不 能保證同步性了 ，為了保證在顯示端多個顯示器顯示的圖像為同一時間拍攝 的，需要對編碼之后的數(shù)據(jù)進行同步處理。
具體的，上述將寬景視頻圖像數(shù)據(jù)重組的過程實際上是圖像分割過程， 包括步驟
a、將所述寬景視頻圖像分割為多個子圖像，同時得到生成所述多個子圖 像的多個同步信息，每個子圖像對應(yīng)一個同步信息。所述同步信息具體為接收到的所述寬景視頻圖像數(shù)據(jù)的時間戳，也可以為自定義的序號，所述序號的定義方式要保證屬于同一寬景視頻圖像數(shù)據(jù) 分割后的多個子圖像的序號符合預(yù)先設(shè)定的規(guī)律，例如可以是相同或者相連續(xù)。b、 為每個子圖像的分割方式分配重建信息，所述重建信息用來記錄每個 子圖像的分割方式。c、 將各子圖像及其對應(yīng)的同步信息和重建信息發(fā)送給其他設(shè)備。于是，上述一種視頻圖像數(shù)據(jù)處理方法進一步包括同步過程和重建過程， 下面分別進行介紹所述同步過程如下首先，接收所述其他設(shè)備發(fā)送的各子圖像及其對應(yīng)的同步信息和重建信 息，然后，根據(jù)所述同步信息對所述子圖像進行歸類，找出屬于同一寬景視 頻圖像數(shù)據(jù)分割后的多個子圖像，即在同 一 時間得到的圖像信息。執(zhí)行上述方法的設(shè)備具有接收緩存、重建緩存和發(fā)送緩存，接收緩存接 收進行分割后的子圖像，屬于同 一幅寬景圖像的子圖像的同步信息符合預(yù)先 設(shè)定的規(guī)律，例如相同或相連續(xù)，重建緩存中存儲待重建的子圖像，發(fā)送緩 存存儲重建的圖像。所述重建信息可以是分割方式，所述重建過程為根據(jù)所述分割對所述 歸類后的子圖像進行重建，得到多路視頻圖像數(shù)據(jù)，其中各路視頻圖像數(shù)據(jù) 按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。所述同步和重建的具體過程可以包括步驟a、初始化4喿作，即確定最小同步信息MinSyinfo;該步驟所述的"最小同步信息"有可能不是最小的，其可以是任意選出 來的，是々支定的"最小同步信息"。步驟b、從接收緩存中取出未被選取子圖像，獲取其同步信息CurrSyinfo。步驟c、判斷MinSyinfo是否大于CurrSyinfo,如果是，進入步驟d;否 則，進入步驟e;步驟d、將CurrSyinfo確定為MinSyinfo,返回步驟b;步驟e、進行CDT(Check Delay Time, 4企測處理延時)處理，如果所述處 理延時大于規(guī)定延時，則進入步驟f;否則，進入步驟g;步驟f、將發(fā)送緩存中存儲的圖像直接輸出，并返回步驟a;步驟g、判斷MinSyinfo是否小于CurrSyinfo,如果是，返回步驟b;否 則，進入步驟h;步驟h、進行CDT處理，如果所述處理延時大于規(guī)定延時，則進入步驟 f;否則，進入步驟i;步驟i、將該子圖像存儲至重建緩存；步驟j、判斷所述接收緩存中是否還存在未被選取的子圖像，若是，返回 步驟b，若否，進入步驟k;步驟k、將重建緩存中存儲的子圖像根據(jù)重建信息進行重建，將重建后的 圖像存儲至發(fā)送緩存，并進入步驟f?？梢岳斫獾氖?，步驟f中發(fā)送緩存發(fā)送數(shù)據(jù)后，并不立即釋放該緩存，因 此當(dāng)從步驟e或步驟f進入步驟f時，所述發(fā)送緩存中存儲的圖像是成功重建 的前一幀圖像；所述發(fā)送緩存中存儲的圖像由步驟k更新，所述更新可以是 數(shù)據(jù)覆蓋的方式，也可以是先釋放所述發(fā)送緩存，再存入數(shù)據(jù)的方式，或者 其他數(shù)據(jù)更新方式。在其他實施例中，在重組過程中，在將所述多個子圖像及其對應(yīng)的同步 信息和重建信息發(fā)送之前，將所述多個子圖像及其對應(yīng)的同步信息和重建信 息進行編碼，編碼方式可以是符合現(xiàn)在主流的各種標(biāo)準(zhǔn)的壓縮標(biāo)準(zhǔn)碼流格式， 如h261、 h263、 h263++、 mpegl、 mpeg2或mpeg4等多種方式。相應(yīng)的，在所述同步過程中，接收所述子圖像及其對應(yīng)的同步信息和重 建信息后，先進行解碼，對應(yīng)上述重組過程的多個編碼器，相應(yīng)的解碼器也 可以設(shè)置有多個。然后，根據(jù)所述同步信息對所述解碼后的子圖像進行歸類， 找出屬于同 一寬景視頻圖像數(shù)據(jù)分割后的多個子圖像，即在同 一時間得到的 圖像信息。本發(fā)明實施例同時還公開了 一種視頻圖像數(shù)據(jù)處理裝置，可實現(xiàn)上述實 施例7>開的方法。所述視頻圖像數(shù)據(jù)處理裝置的一種結(jié)構(gòu)形式如圖8所示，包括數(shù)據(jù)組 合單元81、數(shù)據(jù)重組單元82、數(shù)據(jù)輸入接口 83和數(shù)據(jù)輸出單元84。
其中
數(shù)據(jù)輸入接口 83的數(shù)量為多個，分別與多臺攝像機相連，用于獲取多路 視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息，所述關(guān)聯(lián)信息包括用于 指示所述視頻圖像數(shù)據(jù)的物理位置信息，及所述視頻圖像數(shù)據(jù)被捕獲的時間 戳信息。
數(shù)據(jù)組合單元81,用于依據(jù)所述關(guān)聯(lián)信息，將所述多路視頻圖像組合成 單路寬景視頻圖像數(shù)據(jù)。具體的，依據(jù)各路視頻圖像數(shù)據(jù)的物理位置及獲取 時間，將所述多路視頻圖像組合成單路寬景視頻圖像數(shù)據(jù)。
數(shù)據(jù)重組單元82,針對顯示設(shè)備的數(shù)量和大小及所支持的視頻圖像格式， 將所述單路寬景視頻圖像數(shù)據(jù)重組成適應(yīng)多個顯示設(shè)備播放的多路視頻圖像 數(shù)據(jù)。
數(shù)據(jù)輸出單元84,用于將數(shù)據(jù)重組單元82處理得到的多路視頻圖像數(shù)據(jù) 通過通信網(wǎng)絡(luò)發(fā)送給處于遠端的視頻會議設(shè)^(可以是終端，也可以是MCU)。
于是，所述處于遠端的視頻會議設(shè)備即可將多路視頻圖像數(shù)據(jù)按照視頻 圖像在寬景視頻圖像中的位置排列后，傳輸給所述多個顯示設(shè)備。所有顯示 設(shè)備顯示的視頻圖像即可組合成一幅廣視角的視頻圖像，為用戶帶來寬景的 視覺體驗。
數(shù)據(jù)輸入接口 83的類型可以是YPbPr接口、 DVI接口、 HDMI接口或 VGA接口等。 .
需要說明的是，為了減少發(fā)送的數(shù)據(jù)量并保證發(fā)送的安全性，所述視頻 圖像數(shù)據(jù)處理裝置的另一種結(jié)構(gòu)還可以包括用于進行壓縮編碼的功能單元， 如圖9所示，包括it據(jù)組合單元91、數(shù)據(jù)重組單元92、數(shù)據(jù)輸入接口 93、數(shù) 據(jù)輸出單元94和數(shù)據(jù)編碼器95。
其中
24數(shù)據(jù)組合單元91、數(shù)據(jù)重組單元92、數(shù)據(jù)輸入接口 93和數(shù)據(jù)輸出單元 94的功能，分別與數(shù)據(jù)組合單元81、數(shù)據(jù)重組單元82、數(shù)據(jù)輸入接口83和 數(shù)據(jù)輸出單元84的功能基本相同。
數(shù)據(jù)編碼器95,用于獲取數(shù)據(jù)重組單元92重組得到的多路視頻圖像數(shù)據(jù)， 進行編碼后提供給數(shù)據(jù)輸出單元94。其編碼方式可以是H.261、 H.263、 H.264、 MPEG1、 MPEG2或MPEG4。
為了使數(shù)據(jù)處理的速度更快，以保證數(shù)據(jù)傳輸?shù)膶崟r性，在另外實施例 中可采用多個數(shù)據(jù)編碼器同時對數(shù)據(jù)重組單元92重組得到的多路視頻圖像數(shù) 據(jù)進行編碼處理。這種情況下，數(shù)據(jù)重組單元92處理得到的各路視頻圖像數(shù) 據(jù)均包括所述寬景視頻圖像重組后的每個子圖像及與其對應(yīng)的同步信息和 重組信息。在數(shù)據(jù)輸出單元94將多個編碼器編碼處理的多路視頻圖像數(shù)據(jù)輸 出后，接收所述多路視頻圖像數(shù)據(jù)的設(shè)備即可依據(jù)所述同步信息和重建信息 進行同步過程和重建過程，所述同步過程和重建過程的具體內(nèi)容可參照前文 方法部分的描述，在此不在贅述。
所述接收多路視頻圖像數(shù)據(jù)的設(shè)備即是所述視頻圖像數(shù)據(jù)處理裝置的另 一種結(jié)構(gòu)形式，包括多個數(shù)據(jù)輸入接口和多個數(shù)據(jù)輸出接口，另外，還包 括數(shù)據(jù)解碼器、數(shù)據(jù)同步單元和數(shù)據(jù)重建單元，其中
所述數(shù)據(jù)輸入接口用于獲取編碼后的多路視頻圖像數(shù)據(jù)；
所述數(shù)據(jù)解碼器數(shù)量為多個，用于同時對編碼后的多路視頻圖像數(shù)據(jù)進 行解碼，解碼后的多路視頻圖像數(shù)據(jù)包含所述寬景視頻圖像分割成的多個子 圖{象及與其相對應(yīng)的同步信息和重建信息；
所述數(shù)據(jù)同步單元用于將所述解碼后的子圖像^4居與其對應(yīng)的同步信 息進行歸類，具體過程可參照前文方法實施例部分的描述。
所述數(shù)據(jù)重建單元用于根據(jù)所述重建信息對所述歸類后的子圖像進行 重建，得到多路視頻圖像數(shù)據(jù)，并提供給數(shù)據(jù)輸出接口，各路視頻圖像數(shù)據(jù) 按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
25一種結(jié)構(gòu)形式如圖IO所示，包括數(shù)據(jù) 組合單元101、數(shù)據(jù)重組單元102及數(shù)據(jù)輸入接口 103和多個數(shù)據(jù)輸出接口 104。
其中
數(shù)據(jù)組合單元101和數(shù)據(jù)重組單元102的功能，分別與數(shù)據(jù)組合單元81 和數(shù)據(jù)重組單元82的功能基本相同。
本結(jié)構(gòu)與圖8所示結(jié)構(gòu)的區(qū)別在于數(shù)據(jù)輸入接口 103獲取的多路視頻 圖像數(shù)據(jù)和各路視頻圖像之間的關(guān)聯(lián)信息，是由其他設(shè)備從通信網(wǎng)絡(luò)發(fā)送過 來的。多個數(shù)據(jù)輸出接口 104分別與多個顯示設(shè)備相連接，用于將數(shù)據(jù)重組 單元102處理得到的多路視頻圖像數(shù)據(jù)按照視頻圖像在寬景視頻圖像中的位 置排列發(fā)送給各顯示設(shè)備，所有顯示設(shè)備顯示的視頻圖像即可組合成一幅廣 視角的視頻圖像。
具體的，數(shù)據(jù)輸入接口 103可以由網(wǎng)絡(luò)接口和數(shù)據(jù)接收單元組成，所述 網(wǎng)絡(luò)接口用于與通信網(wǎng)絡(luò)建立連接，所述數(shù)據(jù)接收單元通過所述網(wǎng)絡(luò)接口接 收其他設(shè)備從通信網(wǎng)絡(luò)傳送過來的視頻圖像數(shù)據(jù)。
所述網(wǎng)絡(luò)接口可以是基于電路交換的ISDN、 El接口、 V35接口、基于 包交換的以太網(wǎng)接口或基于無線連接的無線端口。
另外，如果數(shù)據(jù)輸入接口 103接收到的多路視頻圖像數(shù)據(jù)和各路視頻圖 像之間的關(guān)聯(lián)信息是經(jīng)過編碼的，則所述視頻圖像數(shù)據(jù)處理裝置的另 一種結(jié) 構(gòu)中需要包括用于解碼的功能單元，如圖ll所示，包括數(shù)據(jù)組合單元lll、 數(shù)據(jù)重組單元112、多個數(shù)據(jù)輸入接口 113和數(shù)據(jù)輸出接口 114,還包括數(shù)據(jù) 解碼器115,其中
數(shù)據(jù)組合單元lll、數(shù)據(jù)重組單元112、數(shù)據(jù)輸入接口 U3和數(shù)據(jù)輸出接 口 114的功能，分別與數(shù)據(jù)組合單元101、數(shù)據(jù)重組單元102、數(shù)據(jù)輸入接口 103和數(shù)據(jù)輸出接口 104的功能基本相同。
數(shù)據(jù)編碼器115,用于對數(shù)據(jù)輸入接口 113獲取的多路視頻圖像數(shù)據(jù)和各 路視頻圖像之間的關(guān)聯(lián)信息進行解碼，然后提供給數(shù)據(jù)組合單元111。
26此外，本發(fā)明實施例還提供了一種視頻會議系統(tǒng)，該系統(tǒng)的一種具體結(jié)
構(gòu)如圖12所示，包括數(shù)據(jù)組合單元121、數(shù)據(jù)發(fā)送單元122、數(shù)據(jù)接收單 元123、數(shù)據(jù)重組單元124及多個數(shù)據(jù)輸入接口 125和數(shù)據(jù)輸出接口 126。 其中
數(shù)據(jù)組合單元121、數(shù)據(jù)發(fā)送單元122和數(shù)據(jù)輸入接口 125位于視頻會議 的一方會場。多個數(shù)據(jù)輸入接口 125獲取多路視頻圖像數(shù)據(jù)及各路視頻圖像 數(shù)據(jù)間的關(guān)聯(lián)信息，并由數(shù)據(jù)組合單元121依據(jù)所述關(guān)聯(lián)信息，將所述多路 視頻圖像組合成單路寬景視頻圖像數(shù)據(jù)，然后，由數(shù)據(jù)發(fā)送單元122將該單 路寬景視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送給位于遠端的另 一方會場。
數(shù)據(jù)接收單元123、數(shù)據(jù)重組單元124及數(shù)據(jù)輸出接口 126位于所述位于 遠端的另一方會場。數(shù)據(jù)接收單元123將接收承栽于通信網(wǎng)絡(luò)的單路寬景視 頻圖像數(shù)據(jù)，然后提供給數(shù)據(jù)重組單元124,數(shù)據(jù)重組單元124依據(jù)顯示設(shè)備 的數(shù)量、支持的畫面大小及視頻圖像格式，將所述單路寬景視頻圖像數(shù)據(jù)重 組成適應(yīng)多個顯示設(shè)備播放的多路視頻圖像數(shù)據(jù)，由數(shù)據(jù)輸出接口 126提供 給與其對應(yīng)的顯示設(shè)備。
所述顯示設(shè)備按照所述視頻圖像在寬景視頻圖像中的位置擺放，所有顯 示設(shè)備顯示的視頻圖像即可組合成一幅廣視角的視頻圖像，為用戶帶來寬景 的視覺體驗。
需要說明的是，數(shù)據(jù)輸入接口 125和數(shù)據(jù)輸出接口 126的類型可以是 YPbPr接口、 DVI接口、 HDMI接口或VGA接口。另夕卜，數(shù)據(jù)輸入接口 125 和數(shù)據(jù)輸出接口 126的類型可以不一樣，數(shù)據(jù)輸入接口 125獲取的視頻圖像 數(shù)據(jù)可以由數(shù)據(jù)重組單元123在重組時，針對數(shù)據(jù)輸出接口 126的類型進行 格式轉(zhuǎn)換。例如數(shù)據(jù)輸入接口 125為DVI接口，其獲取的視頻圖像數(shù)據(jù)為 DVI格式，而數(shù)據(jù)輸出接口 126是HDMI接口，因此，數(shù)據(jù)重組單元123在 進行視頻圖像數(shù)據(jù)重組時，需要將DVI格式視頻圖像數(shù)據(jù)轉(zhuǎn)換為HDMI格式 視頻圖像數(shù)據(jù)。
各方會場需要同時擔(dān)當(dāng)發(fā)送方和接收方的工作，也即通過數(shù)據(jù)輸入接 口 125、數(shù)據(jù)組合單元121和數(shù)據(jù)發(fā)送單元122發(fā)送本方會場的視頻圖像數(shù)據(jù)，通過數(shù)據(jù)接收單元123、數(shù)據(jù)重組單元124及數(shù)據(jù)輸出接口 126接收、處理對 方會場的視頻圖像數(shù)據(jù)。
需要說明的是，在其他結(jié)構(gòu)形式的系統(tǒng)中，發(fā)送方的工作僅需通過數(shù)據(jù) 輸入接口 125獲取多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息， 然后通過通信網(wǎng)絡(luò)發(fā)送對方會場。接收方從通信網(wǎng)絡(luò)獲取所述多路視頻圖像 數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息后，進行組合、重組等操作。請參 考圖13,為本發(fā)明實施例提供的一種視頻會議系統(tǒng)的另一種結(jié)構(gòu)示意圖，包 括數(shù)據(jù)組合單元131、數(shù)據(jù)發(fā)送單元132、數(shù)據(jù)接收單元133、數(shù)據(jù)重組單 元134及多個數(shù)據(jù)輸入沖妄口 135和數(shù)據(jù)輸出接口 136。
其中
數(shù)據(jù)發(fā)送單元132和多個數(shù)據(jù)輸入接口 135位于一方會場，數(shù)據(jù)接收單 元133、數(shù)據(jù)組合單元131、數(shù)據(jù)重組單元134及多個數(shù)據(jù)輸出接口 136位于 另一方會場。
多個數(shù)據(jù)輸入接口 135獲取多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)間的 關(guān)聯(lián)信息，數(shù)據(jù)發(fā)送單元132將所述多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù) 間的關(guān)聯(lián)信息通過通信網(wǎng)絡(luò)發(fā)送給另一方會場；處于另一方會場的數(shù)據(jù)接收 單元133接收到所述多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息后， 提供給數(shù)據(jù)組合單元131,數(shù)據(jù)重組單元131依據(jù)所述關(guān)聯(lián)信息將所述多路視 頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)后，提供給數(shù)據(jù)重組單元134,數(shù)據(jù) 重組單元134依據(jù)顯示設(shè)備的數(shù)量、支持的畫面大小及視頻圖像格式，將所 述單路寬景視頻圖像數(shù)據(jù)重組成適應(yīng)多個顯示設(shè)備播放的多,路視頻圖像數(shù) 據(jù)，由數(shù)據(jù)輸出接口 136提供給與其對應(yīng)的顯示設(shè)備。
需要說明的是，由于上述數(shù)據(jù)發(fā)送單元(數(shù)據(jù)發(fā)送單元122和132 )將視 頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送的，因此，為了減少發(fā)送的數(shù)據(jù)量并保證數(shù)據(jù) 的安全性，所述數(shù)據(jù)發(fā)送單元發(fā)送的數(shù)據(jù)可以經(jīng)過編碼。相應(yīng)的，所述數(shù)據(jù) 接收單元(數(shù)據(jù)接收單元123和133 )在接收到通信網(wǎng)絡(luò)發(fā)送的數(shù)據(jù)后進行解 碼。
28需要說明的是，在其他結(jié)構(gòu)形式的系統(tǒng)中，發(fā)送方在接收到多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息后，依據(jù)所述關(guān)聯(lián)信息將所述多路視頻圖像數(shù)據(jù)組合成單
路寬景視頻圖像數(shù)據(jù)，然后重組成若干路視頻圖像數(shù)據(jù)并發(fā)送；接收方接收
所述若干路視頻圖像數(shù)據(jù)后提供給本方會場的顯示設(shè)備顯示。具體結(jié)構(gòu)形式
如圖14所示，包括數(shù)據(jù)組合單元141、數(shù)據(jù)發(fā)送單元142、數(shù)據(jù)接收單元143、數(shù)據(jù)重組單元144及多個數(shù)據(jù)輸入接口 145和數(shù)據(jù)輸出接口 146。其中
各單元的功能與圖12、圖13中的各單元的功能基本相同，所不同的是數(shù)據(jù)輸入接口 145、數(shù)據(jù)組合單元141、數(shù)據(jù)重組單元144和數(shù)據(jù)發(fā)送單元142處于一方會場，數(shù)據(jù)接收單元143和數(shù)據(jù)輸出接口 146處于另一方會場。這意味著，處于一方會場的數(shù)據(jù)重組單元144需要根據(jù)另一方會場的顯示設(shè)備的數(shù)量、支持的畫面大小及視頻圖像格式進行視頻圖像數(shù)據(jù)重組。
此外，在另外的結(jié)構(gòu)中，還可以進一步包括數(shù)據(jù)編碼器、數(shù)據(jù)解碼器、數(shù)據(jù)同步單元和數(shù)據(jù)重建單元，其中
所述數(shù)據(jù)編碼器數(shù)量為多個，設(shè)置于數(shù)據(jù)重組單元144所在會場，用于同時對數(shù)據(jù)重組單元144重組得到的多路視頻圖像數(shù)據(jù)進行處理，所述數(shù)據(jù)重組單元144重組得到的各路視頻圖像數(shù)據(jù)包括所述寬景視頻圖像分割后的每個子圖像及與其對應(yīng)的同步信息和重組信息；
所述數(shù)據(jù)解碼器數(shù)量與所述數(shù)據(jù)編碼器的數(shù)量相同，設(shè)置于數(shù)據(jù)接收單元143所在會場，用于同時對數(shù)據(jù)接收單元143接收的經(jīng)過編碼的多路視頻圖像數(shù)據(jù)進行解碼；
所述數(shù)據(jù)同步單元用于將經(jīng)過所述各個數(shù)據(jù)解碼器解碼后的子圖像根據(jù)與其對應(yīng)的同步信息進行歸類，具體過程可參照前文方法實施例部分的描述。
所述數(shù)據(jù)重建單元用于根據(jù)所述重建信息對所述歸類后的子圖像進行重建，得到多路視頻圖像數(shù)據(jù)，并提供給數(shù)據(jù)輸出接口，各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列?？梢钥闯?，本發(fā)明實施例比較適合視頻會議雙方會場相同(顯示設(shè)備數(shù)量、支持的畫面大小及視頻圖像格式相同)的情況。
針對上述視頻圖像數(shù)據(jù)處理方法、裝置及會議系統(tǒng)，本發(fā)明實施例同時還公開了一種視頻會議終端，考慮到視頻會議的各方的角色都是相互的(同時作為發(fā)送方和接收方)，所述視頻會議終端的一種具體結(jié)構(gòu)如圖15所示，
包括數(shù)據(jù)組合單元151、數(shù)據(jù)收發(fā)單元152、網(wǎng)絡(luò)接口 153、數(shù)據(jù)重組單元154及多個數(shù)據(jù)輸入接口 155和數(shù)據(jù)輸出接口 156。其中
網(wǎng)絡(luò)接口 153用于與外部通信網(wǎng)絡(luò)建立連接，數(shù)據(jù)收發(fā)單元152用于獲取通信網(wǎng)絡(luò)發(fā)送的數(shù)據(jù)，及向所述通信網(wǎng)絡(luò)發(fā)送數(shù)據(jù)。
其他的功能單元，如數(shù)據(jù)組合單元151、數(shù)據(jù)重組單元154、數(shù)據(jù)輸入接口 155和數(shù)據(jù)輸出接口 156的功能，可參照前文視頻圖像數(shù)據(jù)處理裝置及視頻會議系統(tǒng)部分的內(nèi)容。
作為發(fā)送方，所述視頻會議終端需要獲取本方會場的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息，組合成單路寬景視頻圖像數(shù)據(jù)后通過通信網(wǎng)絡(luò)發(fā)送給對方會場；同時作為接收方，所述視頻會議終端需要接收對方會場通過通信網(wǎng)絡(luò)發(fā)送過來的寬景視頻圖像數(shù)據(jù)，重組處理成多路視頻數(shù)據(jù)圖像后傳輸給本方會場的顯示設(shè)備。
圖16示出了所述視頻會議終端的另一結(jié)構(gòu)，包括數(shù)據(jù)組合單元161、數(shù)據(jù)收發(fā)單元162、網(wǎng)絡(luò)接口 163、數(shù)據(jù)重組單元164及多個數(shù)據(jù)輸入接口 165和數(shù)據(jù)輸出接口 166，還包括數(shù)據(jù)編碼器167和數(shù)據(jù)解碼器168。
其中
數(shù)據(jù)組合單元161、數(shù)據(jù)收發(fā)單元162、網(wǎng)絡(luò)接口 163、數(shù)據(jù)重組單元164、數(shù)據(jù)輸入接口 165和數(shù)據(jù)輸出接口 166的功能，分別與數(shù)據(jù)組合單元151、數(shù)據(jù)收發(fā)單元152、網(wǎng)絡(luò)接口 153、數(shù)據(jù)重組單元154、數(shù)據(jù)輸入接口 155和數(shù)據(jù)輸出接口 156的功能基本相同。
數(shù)據(jù)編碼器167在數(shù)據(jù)收發(fā)單元162發(fā)送數(shù)據(jù)之前，對數(shù)據(jù)進行編碼，數(shù)據(jù)解碼器168在數(shù)據(jù)收發(fā)單元162接收數(shù)據(jù)之后，對數(shù)據(jù)進行解碼。
30所述視頻會議終端的另一結(jié)構(gòu)如圖17所示，包括數(shù)據(jù)組合單元171、數(shù)據(jù)收發(fā)單元172、網(wǎng)絡(luò)接口 173、數(shù)據(jù)重組單元174及多個數(shù)據(jù)輸入接口 175和數(shù)據(jù)輸出接口 176。
其中
各單元的功能分別與圖15中各單元的功能基本相同。
所不同的是，所述視頻會議終端作為發(fā)送方時，獲取本方會場的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息后，直接通過通信網(wǎng)絡(luò)發(fā)送給對方會場。同時，作為接收方時，接收對方會場通過通信網(wǎng)絡(luò)發(fā)送過來的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息，組合成單路寬景視頻圖像數(shù)據(jù)后，再重組處理成多路視頻數(shù)據(jù)圖像后傳輸給本方會場的顯示設(shè)備。
圖18示出了所述視頻會議終端的另一結(jié)構(gòu)，包括數(shù)據(jù)組合單元181、數(shù)據(jù)收發(fā)單元182、網(wǎng)絡(luò)接口 183、數(shù)據(jù)重組單元184及多個數(shù)據(jù)輸入接口 185和數(shù)據(jù)輸出接口 186,還包括數(shù)據(jù)編碼器187和數(shù)據(jù)解碼器188，其中各單元的功能與圖16所示的各單元的功能基本相同，所不同的是所述視頻會議終端作為發(fā)送方時，獲取本方會場的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息，并進行編碼后直接通過通信網(wǎng)絡(luò)發(fā)送給對方會場。同時，作為接收方時，接收對方會場通過通信網(wǎng)絡(luò)發(fā)送過來的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息，解碼后組合成單路寬景視頻圖像數(shù)據(jù)，然后重組處理成多路視頻數(shù)據(jù)圖像后傳輸給本方會場的顯示設(shè)備。
在另外的實施例中，視頻會議終端作為發(fā)送方時，獲取本方會場的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息，組合成單路寬景視頻圖像數(shù)據(jù)，并依據(jù)對方會場的顯示設(shè)備的數(shù)量、支持的畫面大小及視頻圖像格式，將所述單路寬景視頻圖像數(shù)據(jù)重組成適應(yīng)多個顯示設(shè)備播放的多路視頻圖像數(shù)據(jù)，然后通過通信網(wǎng)絡(luò)(或者進行編碼后通過通信網(wǎng)絡(luò))發(fā)送往對方會場。同時，作為接收方時，接收對方通過通信網(wǎng)絡(luò)發(fā)送的多路視頻數(shù)據(jù)圖像后，提供給本方會場的顯示設(shè)備顯示(或者進行解碼后提供給本方會場的
31顯示設(shè)備顯示)。需要說明的是，在這種情況下，在進行編碼時可通過多個編碼器同時對重組得到的多路視頻圖像數(shù)據(jù)進行編碼，在進行解碼時，通過多個解碼器同時對經(jīng)過編碼的多路視頻圖像數(shù)據(jù)進行解碼，并且，進行同步
過程和重建過程，即將經(jīng)過所述數(shù)據(jù)解碼器解碼后的子圖像根據(jù)與其對應(yīng)的同步信息進行歸類，根據(jù)所述重建信息對所述歸類后的子圖像進行重建，得到多路視頻圖像數(shù)據(jù)，其中各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
本說明書中各個實施例采用遞進的方式描述，每個實施例重點說明的都是與其他實施例的不同之處，各個實施例之間相同相似部分互相參見即可。
對于實施例公開的裝置而言，由于其與實施例公開的方法相對應(yīng)，所以描述的比較簡單，相關(guān)之處參見方法部分說明即可。
本領(lǐng)域技術(shù)人員可以理解，可以使用許多不同的工藝和技術(shù)中的任意一種來表示信息、消息和信號。例如，上述說明中提到過的消息、信息都可以表示為電壓、電流、電》茲波、石茲場或》茲性粒子、光場或以上任意組合。
專業(yè)人員還可以進一步意識到，結(jié)合本文中所公開的實施例描述的各示例的單元及算法步驟，能夠以電子硬件、計算機軟件或者二者的結(jié)合來實現(xiàn)，為了清楚地說明硬件和軟件的可互換性，在上述說明中已經(jīng)按照功能一般性地描述了各示例的組成及步驟。這些功能究竟以硬件還是軟件方式來執(zhí)行，取決于技術(shù)方案的特定應(yīng)用和設(shè)計約束條件。專業(yè)技術(shù)人員可以對每個特定的應(yīng)用來使用不同方法來實現(xiàn)所描述的功能，但是這種實現(xiàn)不應(yīng)認(rèn)為超出本發(fā)明的范圍。 ，
程，是可以通過計算機程序來指令相關(guān)的硬件來完成，所述的程序可存儲于一計算機可讀取存儲介質(zhì)中，所述程序在執(zhí)行時，可包括如上述各方法的實施例的流程。其中，所述的存儲介質(zhì)可為磁碟、光盤、只讀存儲記憶體
(Read-Only Memory, ROM)或隨機存儲記憶體(Random Access Memory,RAM)等。
32對所公開的實施例的上述說明，使本領(lǐng)域?qū)I(yè)技術(shù)人員能夠?qū)崿F(xiàn)或使用本發(fā)明。對這些實施例的多種修改對本領(lǐng)域的專業(yè)技術(shù)人員來說將是顯而易見的，本文中所定義的一般原理可以在不脫離本發(fā)明的精神或范圍的情況下,在其它實施例中實現(xiàn)。因此，本發(fā)明將不會被限制于本文所示的這些實施例，而是要符合與本文所公開的原理和新穎特點相一致的最寬的范圍。
權(quán)利要求
1、一種視頻圖像數(shù)據(jù)處理方法，其特征在于，包括獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)；將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)后，發(fā)送給顯示設(shè)備顯示。
2、 如權(quán)利要求l所述的方法，其特征在于，所述關(guān)聯(lián)信息包括各路視 頻圖像的物理位置關(guān)系信息和時間戳信息。
3、 如權(quán)利要求l所述的方法，其特征在于，所述獲取多路相互關(guān)聯(lián)的視 頻圖像數(shù)據(jù)及關(guān)聯(lián)信息具體為獲取承載于通信網(wǎng)絡(luò)上的多路相互關(guān)聯(lián)的視 頻圖像數(shù)據(jù)及關(guān)聯(lián)信息。
4、 如權(quán)利要求l所述的方法，其特征在于，所述獲取多路相互關(guān)聯(lián)的視 頻圖像數(shù)據(jù)及關(guān)聯(lián)信息具體為獲取架設(shè)視頻會議一方現(xiàn)場的多臺攝像機采 集的多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息。
5、 如權(quán)利要求l所述的方法，其特征在于，所述將寬景視頻圖像數(shù)據(jù)重 組的過程包括分割過程，所述分割過程包括將所述寬景視頻圖像分割為多個子圖像，同時生成各子圖像的同步信息； 按照分割方式為每個子圖像分配重建信息； 發(fā)送所述多個子圖像及其對應(yīng)的同步信息和重建信息； 所述方法還包括，同步過程和重建過程，其中 所述同步過程包括接收所述子圖像、同步信息和重建信息；根據(jù)所述同步信息對所述子圖像進行歸類，屬于同 一幅寬景視頻圖像的 子圖像屬于同一類； 所述重建過程包括根據(jù)所述重建信息對所述歸類后的子圖像進行重建，得到多路視頻圖像 數(shù)據(jù)，其中各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
6、 如權(quán)利要求5所述的方法，其特征在于，所述同步信息為序號或時間戳。
7、 如權(quán)利要求5所述的方法，其特征在于，發(fā)送所述多個子圖像及其對 應(yīng)的同步信息和重建信息之前先對所述多個子圖像及其對應(yīng)的同步信息和重 建信息進行編碼，所述編碼具體為利用多個編碼器同時對所述分割后的多 路子圖像及其對應(yīng)的同步信息和重建信息進行編碼；所述同步過程中接收所述子圖像、同步信息和重建信息具體為利用多 個解碼器同時對接收到的所述編碼后的信息進行解碼。
8、 如權(quán)利要求5所述的方法，其特征在于，所述生成多個子圖像的多個 同步信息具體為生成所述寬景視頻圖像數(shù)據(jù)時的時間戳，或者，生成自定 義的序號，屬于同 一寬景視頻圖l象數(shù)據(jù)分割后的多個子圖像的序號相同。
9、 一種視頻圖像數(shù)據(jù)處理裝置，其特征在于，包括 數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息； 數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)重組單元，用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多 路視頻圖像數(shù)據(jù)；多個數(shù)據(jù)輸出接口，與外部顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單元處 理得到的視頻圖像數(shù)據(jù)傳輸給所述顯示設(shè)備。
10、 如權(quán)利要求9所述的裝置，其特征在于，所述多路相互關(guān)聯(lián)的視頻 圖像數(shù)據(jù)及關(guān)聯(lián)信息來自外部通信網(wǎng)絡(luò)，所述視頻圖像數(shù)據(jù)輸入接口為 ISDN、 El、 V35、基于包交換的以太網(wǎng)接口或基于無線連接的無線端口。
11、 如權(quán)利要求9所述的裝置，其特征在于，還包括數(shù)據(jù)解碼器，當(dāng)所述數(shù)據(jù)輸入接口接收到的視頻圖像數(shù)據(jù)為經(jīng)過編碼后 的視頻圖像數(shù)據(jù)時，對視頻圖像數(shù)據(jù)進行解碼，并提供給所述數(shù)據(jù)組合單元。
12、 如權(quán)利要求9所述的裝置，其特征在于，所述關(guān)聯(lián)信息包括各路 視頻圖像的物理位置關(guān)系信息和時間戳信息。
13、 一種視頻圖像數(shù)據(jù)處理裝置，其特征在于，包括 數(shù)據(jù)輸入接口 ，用于獲取多臺攝像機采集的多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)重組單元，用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多 路視頻圖像數(shù)據(jù)；數(shù)據(jù)發(fā)送單元，用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù) 通過通信網(wǎng)絡(luò)發(fā)送給遠端的視頻會議設(shè)備，以使該視頻會議設(shè)備通過相應(yīng)的 顯示設(shè)備顯示。
14、 如權(quán)利要求13所述的裝置，其特征在于，所述數(shù)據(jù)重組單元生成的 所述多路視頻圖像數(shù)據(jù)包括所述寬景視頻圖像重組后的各個子圖像及與各 子圖像對應(yīng)的同步信息和重組信息。
15、 如權(quán)利要求13所述的裝置，其特征在于，還包括 數(shù)據(jù)編碼器，用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)進行編碼后，提供給所述數(shù)據(jù)發(fā)送單元。
16、 如權(quán)利要求15所述的裝置，其特征在于，所述數(shù)據(jù)編碼器的個數(shù)為 多個，多個數(shù)據(jù)編碼器同時對多路視頻圖像數(shù)據(jù)進行編碼。
17、 一種視頻圖像數(shù)據(jù)處理裝置，其特征在于，包括 數(shù)據(jù)輸入接口，用于獲取編碼后的多路視頻圖像數(shù)據(jù)； 多個數(shù)據(jù)解碼器，同時對編碼后的多路視頻圖像數(shù)據(jù)進行解碼，解碼后的多路視頻圖像數(shù)據(jù)包含所述寬景視頻圖像分割成的多個子圖像及與其相對 應(yīng)的同步信息和重建信息；數(shù)據(jù)同步單元，將所述解碼后的子圖^^根據(jù)與其對應(yīng)的同步信息進行歸數(shù)據(jù)重建單元，根據(jù)所述重建信息對所述歸類后的子圖像進行重建，得 到多路視頻圖像數(shù)據(jù)，其中各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列；多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重建單 元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
18、 一種視頻會議系統(tǒng)，其特征在于，包括數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息； 數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)發(fā)送單元，用于將所述寬景視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送； 數(shù)據(jù)接收單元，用于接收承載于通信網(wǎng)絡(luò)的寬景視頻圖像數(shù)據(jù)； 數(shù)據(jù)重組單元，用于將所述數(shù)據(jù)接收單元接收的所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)；多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
19、 如權(quán)利要求18所述的系統(tǒng)，其特征在于，還包括數(shù)據(jù)編碼器，用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù)進 行編碼后，提供給所述數(shù)據(jù)發(fā)送單元；數(shù)據(jù)解碼器，用于將所述數(shù)據(jù)接收單元接收的寬景視頻圖像數(shù)據(jù)進行解 碼后，提供給所述數(shù)據(jù)重組單元。
20、 一種一見頻會議系統(tǒng)，其特征在于，包括數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息； 數(shù)據(jù)發(fā)送單元，用于將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息通 過通信網(wǎng)絡(luò)發(fā)送；數(shù)據(jù)接收單元，用于接收承載于通信網(wǎng)絡(luò)的所述多路相互關(guān)聯(lián)的視頻圖 像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)重組單元，用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多 路視頻圖像數(shù)據(jù)；多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單 元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
21、 如權(quán)利要求20所述的系統(tǒng)，其特征在于，還包括數(shù)據(jù)編碼器，用于將所述數(shù)據(jù)輸入接口獲取的多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)及關(guān)聯(lián)信息進行編碼后，提供給所述數(shù)據(jù)發(fā)送單元；數(shù)據(jù)解碼器，用于將所述數(shù)據(jù)接收單元接收的多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)及關(guān)聯(lián)信息進行解碼后，提供給所述數(shù)據(jù)組合單元。
22、 一種視頻會議系統(tǒng)，其特征在于，包括數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息； 數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)重組單元，用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)；數(shù)據(jù)發(fā)送單元，用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送；數(shù)據(jù)接收單元，用于接收承載于通信網(wǎng)絡(luò)的所述多路視頻圖像數(shù)據(jù)； 多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)接收單元接收到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
23、 如權(quán)利要求22所述的系統(tǒng)，其特征在于，還包括 數(shù)據(jù)編碼器，用于將所述數(shù)據(jù)重組單元重組得到的多路視頻圖像數(shù)據(jù)進行編碼后，提供給所述數(shù)據(jù)發(fā)送單元;數(shù)據(jù)解碼器，用于將所述數(shù)據(jù)接收單元接收的多路視頻圖像數(shù)據(jù)進行解 碼后，提供給所述數(shù)據(jù)輸出接口。
24、 如權(quán)利要求23所述的系統(tǒng)，其特征在于，所述數(shù)據(jù)重組單元重組得 到的各路視頻圖像數(shù)據(jù)包括所述寬景視頻圖像重組后的每個子圖像及與其 對應(yīng)的同步信息和重組信息；所述數(shù)據(jù)編碼器和數(shù)據(jù)解碼器的個數(shù)均為多個，多個數(shù)據(jù)編碼器同時對 多路視頻圖像數(shù)據(jù)進行編碼，多個數(shù)據(jù)解碼器同時對多路視頻圖像數(shù)據(jù)進行 解碼；所述系統(tǒng)還包括數(shù)據(jù)同步單元，將所述解碼后的子圖像根據(jù)與其對應(yīng)的同步信息進行歸類；數(shù)據(jù)重建單元，根據(jù)所述重建信息對所述歸類后的子圖像進行重建，得 到多路視頻圖像數(shù)據(jù)，提供給多個數(shù)據(jù)輸出接口 ，其中各路視頻圖像數(shù)據(jù)按 照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
25、 一種視頻會議終端，其特征在于，包括數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)收發(fā)單元，用于將所述寬景視頻圖像數(shù)據(jù)通過通信網(wǎng)絡(luò)發(fā)送給遠端 的視頻會議設(shè)備，以及，接收所述視頻會議設(shè)備通過所述通信網(wǎng)絡(luò)發(fā)送的單 路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)重組單元，用于將所述數(shù)據(jù)收發(fā)單元接收到的寬景視頻圖像數(shù)據(jù)重 組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)；多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單 元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
26、 一種視頻會議終端，其特征在于，包括數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)收發(fā)單元，用于將所述多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息通過通信網(wǎng)絡(luò) 發(fā)送給遠端的視頻會議設(shè)備，以及，接收所述視頻會議設(shè)備通過所述通信網(wǎng)絡(luò)發(fā)送的多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)重組單元，用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù) 重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)；多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)重組單 元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
27、 一種視頻會議終端，其特征在于，包括數(shù)據(jù)輸入接口 ，用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；數(shù)據(jù)組合單元，用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)；數(shù)據(jù)重組單元，用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù) 重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)；數(shù)據(jù)收發(fā)單元，用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù) 通過通信網(wǎng)絡(luò)發(fā)送給遠端的視頻會議設(shè)備，以及，接收所述視頻會議設(shè)備通 過所述通信網(wǎng)絡(luò)發(fā)送的經(jīng)過重組得到的多路視頻圖像數(shù)據(jù)；多個數(shù)據(jù)輸出接口，與外部多個顯示設(shè)備相連，用于將所述數(shù)據(jù)收發(fā)單 元接收到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
28、 如權(quán)利要求27所述的終端，其特征在于，還包括多個數(shù)據(jù)編碼器，用于將所述數(shù)據(jù)重組單元重組得到的包含的多路視頻 圖像數(shù)據(jù)進行編碼后，提供給所述數(shù)據(jù)收發(fā)單元，其中，各路視頻圖像數(shù)據(jù) 包括所述寬景視頻圖像分割后的每個子圖像及與其對應(yīng)的同步信息和重組信 息的；數(shù)據(jù)解碼器，用于將所述數(shù)據(jù)收發(fā)單元接收的所述多路視頻圖像數(shù)據(jù)進 行解碼后，提供給數(shù)據(jù)同步單元；數(shù)據(jù)同步單元，用于將經(jīng)過所述數(shù)據(jù)解碼器解碼后的子圖<|^艮據(jù)與其對應(yīng)的同步信息進行歸類；數(shù)據(jù)重建單元，用于根據(jù)所述重建信息對所述歸類后的子圖像進行重建， 得到多路視頻圖像數(shù)據(jù)，提供給所述多個數(shù)據(jù)輸出接口 ，其中各路視頻圖像 數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
全文摘要
本發(fā)明實施例公開了一種視頻圖像數(shù)據(jù)處理方法和裝置，所述方法包括獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息；利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)；將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)多個顯示設(shè)備顯示的多路視頻圖像數(shù)據(jù)后，分別發(fā)送給各顯示設(shè)備顯示。本發(fā)明實施例同時還公開了視頻會議系統(tǒng)及終端。本發(fā)明實施例將多路視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)的過程，能夠消除各視頻圖像數(shù)據(jù)之間存在的重疊現(xiàn)象，因此，可以允許攝像機攝取圖像存在重疊現(xiàn)象，從而降低了對攝像機擺放位置及使用者與攝像機組之間的距離的要求。
文檔編號H04N7/15GK101668160SQ20091016196
公開日2010年3月10日 申請日期2009年9月10日 優(yōu)先權(quán)日2009年9月10日
發(fā)明者源 劉, 凱 李, 靜 王, 嵩 趙, 魏小霞 申請人:深圳華為通信技術(shù)有限公司