專利名稱：視頻電話和流媒體的用戶感知效果的測試系統(tǒng)和測試方法
技術(shù)領(lǐng)域：
本發(fā)明涉及TD-SCDMA-HSDPA/HSUPA-HSPA+-LTE制式的3G移動通信技術(shù)、移動互 聯(lián)網(wǎng)技術(shù)、無人值守嵌入式平臺終端研發(fā)技術(shù)、視頻業(yè)務(wù)用戶感知測試評估技術(shù)(包括但 不限于ITU-T已經(jīng)制定或者正在制定或者將要制定的PEVQ算法、MDI、M0S_V算法等)，屬于 一種對于無線網(wǎng)絡(luò)視頻業(yè)務(wù)(視頻呼叫、流媒體視頻播放)的用戶感知效果進(jìn)行端到端測 試的測試系統(tǒng)。
背景技術(shù)：
TD-SCDMA制式是世界上三大3G標(biāo)準(zhǔn)之一(另外兩種是美國高通公司提出的 CDMA-EVD0標(biāo)準(zhǔn)和歐洲提出的WCDMA標(biāo)準(zhǔn))。這種制式的3G技術(shù)在中國得到了廣泛的應(yīng)用。 TD-SCDMA 制式向 4G 演進(jìn)的路線為TD-SCDMA—HSDPA/HSUPA—HSPA+—LTE TD-SCDMA 是典 型的3G，即高速移動環(huán)境中，可以支持1441A/S的速率；慢速移動環(huán)境中，可以支持3841Λ/ s的速率；靜止?fàn)顟B(tài)下支持2Mb/s的速率；HSDPA和HSUPA并稱為3. 5G，D指downlink,即 基站到終端的下行鏈路，HSDPA即high speed downlink package access (高速下行分組 接入)；U 指 uplink, HSUPA 即 high speed uplink package access (高速上行分組接入)。 兩者結(jié)合起來可以為用戶提供14Mbit/s的下行速率和5. 76Mbit/s的上行速率；HSPA+即 我們通常所說的3. 75G，可以提供終端32Mbit/s的下行速率，并且通過幾個HSPA+技術(shù)的融 合，可以達(dá)到更高的下行速率；LTE即我們通常所說的4G，可以提供高達(dá)326Mbps的下行速 率。可以看出，在現(xiàn)有的TD-SCDMA-HSDPA-HSPA+-LTE這條演進(jìn)路線下的無線網(wǎng)絡(luò)中， 實(shí)時視頻業(yè)務(wù)的應(yīng)用正在快速增加。例如視頻通話，該業(yè)務(wù)可以演變?yōu)橐曨l監(jiān)控；例如流 媒體視頻業(yè)務(wù)，該業(yè)務(wù)可以演變?yōu)槭謾C(jī)電視；這些業(yè)務(wù)可以為運(yùn)營商帶來新的盈利增長點(diǎn)。 但是如果視頻效果不好，將極大影響用戶體驗(yàn)，進(jìn)而導(dǎo)致用戶轉(zhuǎn)投其他運(yùn)營商業(yè)務(wù)。因此對 實(shí)時視頻業(yè)務(wù)進(jìn)行質(zhì)量監(jiān)控，尤其是提供模擬用戶體驗(yàn)的用戶感知測試監(jiān)控，顯得尤為重 要。而對于實(shí)時視頻業(yè)務(wù)的用戶感知結(jié)果測試標(biāo)準(zhǔn)，在國際上有幾種正在發(fā)展中的技術(shù)，如 PEVQ，MDI、M0S_V等。被運(yùn)營商用戶接受程度較高的是PEVQ算法，PEVQ的原理，是通過在網(wǎng) 絡(luò)中播放一段源視頻，然后從接受端(用戶處)接收這段視頻，將兩端視頻質(zhì)量進(jìn)行比較， 得出測試結(jié)果。除了 PEVQ，上面所提到的M0S_V的主動測試也是用類似的比較的算法。而 為了得到兩端視頻，就需要在網(wǎng)絡(luò)的兩端(一頭是核心網(wǎng)，一頭是網(wǎng)絡(luò)覆蓋中的某個區(qū)域。 或者兩頭都是網(wǎng)絡(luò)覆蓋中的某個區(qū)域)進(jìn)行視頻發(fā)送和接收，目前的做法是讓工程師帶著 復(fù)雜的設(shè)備到測試點(diǎn)去操作，進(jìn)而得到數(shù)據(jù)。而考慮工程師的人工成本，考慮交通成本，性 價(jià)比非常低。而由于目前3G網(wǎng)絡(luò)正在建設(shè)中，上面的視頻業(yè)務(wù)還沒有進(jìn)行大規(guī)模的優(yōu)化，從而 導(dǎo)致一些實(shí)時視頻業(yè)務(wù)的用戶體驗(yàn)極為糟糕，而這些實(shí)時視頻業(yè)務(wù)將來是會給運(yùn)營商帶來 豐厚的利潤的。目前運(yùn)營商所采取的對策只是一種被動的態(tài)度——等待用戶投訴后，才啟 動網(wǎng)絡(luò)測試，才啟動優(yōu)化。
具體來講，用戶感知效果測試，通常是指用客觀的測試方法，得到一些客觀的測試 數(shù)據(jù)集，通過對這些數(shù)據(jù)的分析，得到普遍用戶對當(dāng)前網(wǎng)絡(luò)的主觀感受的一個大致通用的 判斷。在網(wǎng)絡(luò)中，通常用戶說“網(wǎng)絡(luò)不好”，是一個非常主觀的評判。比如同樣的一次從www. youtube. com上面在線觀看一段視頻，用戶A可能覺得效果很好，而用戶B會覺得效果很 差。這就是用戶感知的差別。在這種情況下，運(yùn)營商需要把網(wǎng)絡(luò)維持在一個大多數(shù)用戶都 感覺還行的情況，有兩個難點(diǎn)1、一個評判標(biāo)準(zhǔn)；2、一個不間斷的測試系統(tǒng)。評判標(biāo)準(zhǔn)現(xiàn)在 在ITU-T中已經(jīng)有相當(dāng)?shù)墓ぷ?，如PEVQ算法(ITU-T J. 247)，MDI算法(RFC4445)，MOS V (By ITU-T Focus Group on IPTV)等等，將一段錄像通過網(wǎng)絡(luò)播放以后，接受端錄下這段錄像， 再和源錄像進(jìn)行對比，算法軟件會給出一個比較結(jié)果，這個結(jié)果能夠反映出大多數(shù)人對于 這個錄像的感受。目前基于這個算法的應(yīng)用還不多，通常都是一臺很復(fù)雜的測試儀表，需 要很專業(yè)化的工程師帶著，跑到網(wǎng)絡(luò)中的各個地方去進(jìn)行測試，在交通不便的地方，如四川 省，由于交通不便，有些測量地點(diǎn)距離工程師辦公室有超過一天的單程車程，效率非常低。 現(xiàn)有的方案更無法做到不間斷的測試。而對于網(wǎng)絡(luò)進(jìn)行不間斷的用戶感知測試，對運(yùn)營商 的工程師了解網(wǎng)絡(luò)的狀況，進(jìn)行及時的網(wǎng)絡(luò)優(yōu)化服務(wù)至關(guān)重要。而且視頻業(yè)務(wù)的端到端用戶感知測試因?yàn)檩^為專業(yè)，需要很專業(yè)的工程師來進(jìn)行 測試，而移動數(shù)據(jù)網(wǎng)絡(luò)的特點(diǎn)在于任何地點(diǎn)都有可能發(fā)生投訴和故障，用專業(yè)的工程師來 進(jìn)行來回奔波的測試，效率低成本高，而且測量效果不好，無法做到7* 小時監(jiān)控，無法整 體快速提高整個網(wǎng)絡(luò)的質(zhì)量。

發(fā)明內(nèi)容
本發(fā)明要解決的技術(shù)問題是為了克服現(xiàn)有技術(shù)當(dāng)前TD-SCDMA制式的無線網(wǎng)絡(luò) 中，視頻測試所存在的過于專業(yè)化、運(yùn)轉(zhuǎn)調(diào)度難度大、投資大、部署不方便、無法進(jìn)行7拉4 小時長時間無人職守測試等缺陷，提供一種TD-SCDMA-HSDPA/HSUPA-HSPA+-LTE制式下的， 視頻電話和流媒體的用戶感知效果的測試系統(tǒng)和測試方法。本發(fā)明是通過下述技術(shù)方案來解決上述技術(shù)問題的一種視頻電話和流媒體的用戶感知效果的測試系統(tǒng)，其特點(diǎn)在于，其包括測試終端，用于通過無線網(wǎng)絡(luò)，與核心網(wǎng)或者其他測試終端進(jìn)行VT測試，該終端 支持TD-SCDMA制式的無線空中協(xié)議、HSDPA/HSUPA、HSDPA+或LTE ；VT視頻測試服務(wù)器，用于同測試終端建立視頻呼叫，進(jìn)行編解碼設(shè)定，接收并存儲 測試終端發(fā)來的視頻信號，向測試終端播放VT視頻；結(jié)果分析服務(wù)器，用于對測試終端和VT視頻測試服務(wù)器上傳的各種數(shù)據(jù)進(jìn)行關(guān) 聯(lián)分析，計(jì)算出測試結(jié)果；流媒體測試服務(wù)器，用于同測試終端建立流媒體連接，使測試終端可以模擬一個 正常的流媒體視頻業(yè)務(wù)的使用者，從而進(jìn)行一系列流媒體測試；中央數(shù)據(jù)庫，用于存放結(jié)果分析服務(wù)器計(jì)算出的測試結(jié)果；短信應(yīng)用服務(wù)器，通過與無線網(wǎng)絡(luò)的短信平臺相連，向測試終端發(fā)送通知短信；在線升級服務(wù)器，存放新定制的測試方案，供測試終端根據(jù)短信應(yīng)用服務(wù)器的通 知短信來獲??；Web服務(wù)器，用于定制測試方案，以及顯示結(jié)果分析服務(wù)器計(jì)算出的測試結(jié)果；
應(yīng)用邏輯服務(wù)器，與所述測試終端、中央數(shù)據(jù)庫和各服務(wù)器相連接，所述測試終 端、中央數(shù)據(jù)庫和各服務(wù)器通過該應(yīng)用邏輯服務(wù)器交互數(shù)據(jù)。較佳地，該測試系統(tǒng)還包括GIS服務(wù)器，用于將測試結(jié)果和地理信息相關(guān)聯(lián)，測試 結(jié)果所代表的地理信息即可通過web服務(wù)器顯示出來，從而能夠判斷某地點(diǎn)的測試結(jié)果。較佳地，所述核心網(wǎng)包括所述的VT視頻測試服務(wù)器、流媒體測試服務(wù)器、結(jié)果分 析服務(wù)器、中央數(shù)據(jù)庫、短信應(yīng)用服務(wù)器、在線升級服務(wù)器、Web服務(wù)器和應(yīng)用邏輯服務(wù)器。本發(fā)明的另一技術(shù)方案為一種前述的測試系統(tǒng)的測試方法，其特點(diǎn)在于，其包括 以下步驟S1、測試終端獲取例行測試方案或者實(shí)時測試方案；&、在預(yù)定的時間，VT視頻測試服務(wù)器向指定的測試終端發(fā)起VT呼叫，根據(jù)測試方 案的內(nèi)容建立VT呼叫連接；&、雙方進(jìn)行VT視頻同步，測試終端發(fā)送若干幀預(yù)設(shè)圖像到VT視頻測試服務(wù)器， 表示在該預(yù)設(shè)圖像播放完后的時間點(diǎn)時測試終端將開始播放標(biāo)準(zhǔn)視頻文件，VT視頻測試服 務(wù)器收到該預(yù)設(shè)圖像后準(zhǔn)備錄像；、、所述預(yù)設(shè)圖像播放完的時間點(diǎn)到達(dá)后，測試終端開始向VT視頻測試服務(wù)器按 照VT呼叫的格式，播放指定的源視頻文件進(jìn)行測試，VT視頻測試服務(wù)器同時開始錄像，測 試終端播放測試方案中指定的測試時間后停止，VT視頻測試服務(wù)器在測試時間結(jié)束時停止 錄像并存儲該錄像，測試終端同時采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間；S5, VT視頻測試服務(wù)器停止錄像后，重新和測試終端進(jìn)行第二次視頻同步；S6, VT視頻測試服務(wù)器開始向測試終端按照VT呼叫的格式，播放指定的源視頻文 件進(jìn)行測試，測試終端同時開始錄像，VT視頻測試服務(wù)器播放測試方案中指定的測試時間 后停止，測試終端在測試時間結(jié)束時停止錄像并存儲該錄像，測試終端同時采集無線網(wǎng)絡(luò) 參數(shù)，記錄當(dāng)前測試時間；S7、測試終端和VT視頻測試服務(wù)器都斷開VT呼叫，測試終端和VT視頻測試服務(wù) 器上傳測試數(shù)據(jù)到結(jié)果分析服務(wù)器；&、結(jié)果分析服務(wù)器將測試終端或者VT視頻測試服務(wù)器上傳的文件同源文件進(jìn)行 對比計(jì)算，計(jì)算結(jié)果即為VT視頻的用戶感知結(jié)果，然后將該結(jié)果存到中央數(shù)據(jù)庫中供測試 人員查詢調(diào)用。較佳地，步驟S1中，核心網(wǎng)事先制定例行測試方案下發(fā)到測試終端，測試終端再按 照該測試方案進(jìn)行測試。較佳地，所述核心網(wǎng)包括權(quán)利要求1所述的VT視頻測試服務(wù)器、流媒體測試服務(wù) 器、結(jié)果分析服務(wù)器、中央數(shù)據(jù)庫、短信應(yīng)用服務(wù)器、在線升級服務(wù)器、Web服務(wù)器和應(yīng)用邏 輯服務(wù)器。較佳地，步驟S1中，通過web服務(wù)器的web界面制定實(shí)時測試方案，核心網(wǎng)通過短 信應(yīng)用服務(wù)器通知測試終端到在線升級服務(wù)器上取得該測試方案，進(jìn)行測試。較佳地，步驟S1中，所述測試方案的內(nèi)容包括測試發(fā)起的時間，測試時所使用的源 圖像文件，測試時所使用的圖像編碼和測試時播放源圖像的時間長度。較佳地，步驟、和&中的當(dāng)前測試時間包括VT呼叫開始的時間、同步的時間和播 放結(jié)束的時間。
較佳地，步驟S7中的測試數(shù)據(jù)包括測試終端或者VT視頻測試服務(wù)器所生成的錄 像文件，以及測試終端采集的無線網(wǎng)絡(luò)參數(shù)。較佳地，步驟S8中的計(jì)算結(jié)果為根據(jù)PEVQ算法計(jì)算出的MOS值、PSNR參數(shù)、失真 度、碼流損傷和平滑度指標(biāo)中的一種或多種。較佳地，所述的測試系統(tǒng)包括GIS服務(wù)器，步驟S8中，測試人員通過web服務(wù)器和 GIS服務(wù)器提供的圖形界面，查詢所述計(jì)算結(jié)果。本發(fā)明的另一技術(shù)方案為一種前述的測試系統(tǒng)的測試方法，該測試系統(tǒng)中的測 試終端包括主叫測試終端和被叫測試終端，其特點(diǎn)在于，其包括以下步驟T1、所述主叫和被叫測試終端獲取例行測試方案或者實(shí)時測試方案；T2、在預(yù)定的時間，主叫測試終端向被叫測試終端發(fā)起VT呼叫，根據(jù)所述測試方案 的內(nèi)容建立VT呼叫連接；T3、主叫和被叫測試終端進(jìn)行VT視頻同步，被叫測試終端發(fā)送若干幀預(yù)設(shè)圖像到 主叫測試終端，表示在該預(yù)設(shè)圖像播放完后的時間點(diǎn)時被叫測試終端將開始播放標(biāo)準(zhǔn)視頻 文件，主叫測試終端收到該預(yù)設(shè)圖像后準(zhǔn)備錄像；T4、所述預(yù)設(shè)圖像播放完的時間點(diǎn)到達(dá)后，被叫測試終端開始向主叫測試終端按 照VT呼叫的格式，播放指定的源視頻文件進(jìn)行測試，主叫測試終端同時開始錄像，被叫測 試終端播放測試方案中指定的測試時間后停止，主叫測試終端在測試時間結(jié)束后停止錄 像，并存儲該錄像，同時主叫測試終端和被叫測試終端都采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試 時間；T5、主叫測試終端停止錄像后，重新和被叫測試終端進(jìn)行第二次視頻同步；T6、主叫測試終端開始向被叫測試終端按照VT呼叫的格式，播放指定的源視頻文 件進(jìn)行測試，被叫測試終端同時開始錄像，主叫測試終端播放測試方案中指定的測試時間 后停止，被叫測試終端在測試時間結(jié)束后停止錄像，并存儲該錄像，同時主叫測試終端和被 叫測試終端都采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間；T7、主叫測試終端和被叫測試終端都斷開VT呼叫，主叫和被叫測試終端分別上傳 測試數(shù)據(jù)到結(jié)果分析服務(wù)器；T8、結(jié)果分析服務(wù)器將主叫和被叫測試終端上傳的文件同源文件進(jìn)行對比計(jì)算， 計(jì)算結(jié)果即為VT視頻的用戶感知結(jié)果，然后將該結(jié)果存到中央數(shù)據(jù)庫中供測試人員查詢 調(diào)用。較佳地，步驟T1中，核心網(wǎng)事先制定例行測試方案下發(fā)到測試終端，測試終端再按 照該測試方案進(jìn)行測試。較佳地，所述核心網(wǎng)包括權(quán)利要求1所述的VT視頻測試服務(wù)器、流媒體測試服務(wù) 器、結(jié)果分析服務(wù)器、中央數(shù)據(jù)庫、短信應(yīng)用服務(wù)器、在線升級服務(wù)器、Web服務(wù)器和應(yīng)用邏 輯服務(wù)器。較佳地，步驟T1中，通過web服務(wù)器的web界面制定實(shí)時測試方案，核心網(wǎng)通過短 信應(yīng)用服務(wù)器通知測試終端到在線升級服務(wù)器上取得該測試方案，進(jìn)行測試。較佳地，步驟1\和T6中的當(dāng)前測試時間包括VT呼叫開始的時間、同步的時間和播 放結(jié)束的時間。較佳地，步驟T7中的測試數(shù)據(jù)包括主叫和被叫測試終端所生成的錄像文件，以及主叫和被叫測試終端采集的無線網(wǎng)絡(luò)參數(shù)。較佳地，步驟T8中的計(jì)算結(jié)果為根據(jù)PEVQ算法計(jì)算出的MOS值、PSNR參數(shù)、失真 度、碼流損傷和平滑度指標(biāo)中的一種或多種。本發(fā)明的另一技術(shù)方案為一種前述的測試系統(tǒng)的流媒體測試方法，其特點(diǎn)在于， 其包括以下步驟仏、測試終端獲取例行測試方案或者實(shí)時測試方案；隊(duì)、在預(yù)定的時間，測試終端根據(jù)測試方案中的參數(shù)，建立流媒體連接，根據(jù)測試 方案的內(nèi)容向流媒體測試服務(wù)器發(fā)起測試請求，接受流媒體視頻；U3、雙方進(jìn)行流媒體測試同步，流媒體測試服務(wù)器發(fā)送若干幀預(yù)設(shè)圖像到測試終 端，表示在該預(yù)設(shè)圖像播放完后的時間點(diǎn)時流媒體測試服務(wù)器將開始播放標(biāo)準(zhǔn)視頻文件， 測試終端收到該預(yù)設(shè)圖像后準(zhǔn)備錄像；U4、所述預(yù)設(shè)圖像播放完的時間點(diǎn)到達(dá)后，流媒體測試服務(wù)器向測試終端播放指 定的源視頻流媒體文件，測試終端同時開始錄像，流媒體測試服務(wù)器播放測試方案中指定 的測試時間后停止，測試終端在測試時間結(jié)束時停止錄像并存儲該錄像，測試終端同時采 集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間；U5、測試終端和流媒體測試服務(wù)器都斷開流媒體連接，測試終端上傳測試數(shù)據(jù)到 結(jié)果分析服務(wù)器；U6、結(jié)果分析服務(wù)器將測試終端上傳的文件同源文件進(jìn)行對比計(jì)算，計(jì)算結(jié)果即 為流媒體業(yè)務(wù)的用戶感知結(jié)果，然后將該結(jié)果存到中央數(shù)據(jù)庫中供測試人員查詢調(diào)用。較佳地，步驟U1中，核心網(wǎng)事先制定例行測試方案下發(fā)到測試終端，測試終端再按 照該測試方案進(jìn)行測試。較佳地，所述核心網(wǎng)包括權(quán)利要求1所述的VT視頻測試服務(wù)器、流媒體測試服務(wù) 器、結(jié)果分析服務(wù)器、中央數(shù)據(jù)庫、短信應(yīng)用服務(wù)器、在線升級服務(wù)器、Web服務(wù)器和應(yīng)用邏 輯服務(wù)器。較佳地，步驟仏中，通過web服務(wù)器的web界面制定實(shí)時測試方案，核心網(wǎng)通過短 信應(yīng)用服務(wù)器通知測試終端到在線升級服務(wù)器上取得該測試方案，進(jìn)行測試。較佳地，步驟U1中，所述測試方案的內(nèi)容包括測試發(fā)起的時間，測試時所使用的源 圖像文件，測試時所使用的圖像編碼和測試時播放源圖像的時間長度。較佳地，步驟隊(duì)中的測試數(shù)據(jù)包括測試終端所生成的錄像文件，以及測試終端采 集的無線網(wǎng)絡(luò)參數(shù)。較佳地，步驟U6中的計(jì)算結(jié)果為根據(jù)PEVQ算法計(jì)算出的MOS值、PSNR參數(shù)、失真 度、碼流損傷和平滑度指標(biāo)中的一種或多種。本發(fā)明的積極進(jìn)步效果在于本發(fā)明為一種靈活部署、無人職守運(yùn)作、遠(yuǎn)程控制、 遠(yuǎn)程升級并且易于使用的TD-SCDMA無線網(wǎng)絡(luò)視頻電話和流媒體業(yè)務(wù)用戶感知效果測試系 統(tǒng)。該系統(tǒng)可以讓運(yùn)營商工程師呆在辦公室，卻能方便高效地檢測無線網(wǎng)絡(luò)中VT(Videc) Telephony,即視頻通話)和流媒體業(yè)務(wù)的運(yùn)行質(zhì)量，通過在不同的環(huán)境中布置測試終端， 無須用大量的人力物力，卻能得到大量測試點(diǎn)的7* 小時測試結(jié)果，做到實(shí)時了解網(wǎng)絡(luò)中 的每個細(xì)節(jié)。


圖1是本發(fā)明實(shí)施例1的測試系統(tǒng)的示意圖。圖2是本發(fā)明實(shí)施例1的測試終端的模塊示意圖。圖3是本發(fā)明實(shí)施例2的VT測試中終端對核心網(wǎng)的測試方法流程圖。圖4是本發(fā)明實(shí)施例3的VT測試中終端對終端的測試方法流程圖。圖5是本發(fā)明實(shí)施例4的流媒體測試方法流程圖。
具體實(shí)施例方式下面結(jié)合附圖給出本發(fā)明較佳實(shí)施例，以詳細(xì)說明本發(fā)明的技術(shù)方案。實(shí)施例1下面對本發(fā)明中的測試系統(tǒng)加以具體的說明。如圖1-4所示，本發(fā)明中的無線網(wǎng)絡(luò)數(shù)據(jù)業(yè)務(wù)的測試系統(tǒng)，包括a、測試終端11 (TD-SCDMA制式)，用于通過無線網(wǎng)絡(luò)，與核心網(wǎng)或者其他測試終端 進(jìn)行VT測試，該終端支持TD-SCDMA制式的無線空中協(xié)議、HSDPA/HSUPA、HSDPA+或LTE，。 本實(shí)施例中，可以在各處放置若干個測試終端，這些終端可以通過遠(yuǎn)程控制，自動發(fā)起一些 測試(比如撥打視頻電話、收發(fā)短信、觀看流媒體圖像)。測試終端還可以包括固定測試終 端和有GPS功能的移動撥測終端兩種，固定測試終端中，除了 3G無線數(shù)據(jù)功能外，還有WiFi 功能，可以用于將測試結(jié)果無線上傳到核心網(wǎng)。如圖2為本實(shí)施例所采用的一種測試終端，BP(基帶處理模塊112)為無線基帶 處理部分，如TD-SCDMA/HSPA+等(現(xiàn)有技術(shù)中的無線協(xié)議)等的無線協(xié)議棧和基帶部分 都在這部分進(jìn)行處理；RF (射頻模塊11 是射頻模塊，通過射頻模塊，數(shù)字信號才能轉(zhuǎn)換 為模擬信號，通過和RF相連接的天線發(fā)送出去。同BP相連的AP (應(yīng)用程序處理模塊111) 部分，是測試應(yīng)用程序所在的模塊，這部分應(yīng)用程序，靈活構(gòu)建了工程師所需的各種測試方 案，并且能夠根據(jù)新的測試需求，更改測試方案。測試終端中還包括相關(guān)的電源管理、IO等 部分模塊。由于使用嵌入式系統(tǒng)設(shè)計(jì)，終端系統(tǒng)穩(wěn)定、低耗。終端的參數(shù)情況如下大容 量設(shè)計(jì)，可以為應(yīng)用程序提供400MBits的存儲空間，包括測試數(shù)據(jù)文件、應(yīng)用程序等；智 能低能耗設(shè)計(jì)，在不用測試時自動進(jìn)入休眠狀態(tài)，大容量電池可以保證在220V交流電斷電 情況下，系統(tǒng)待機(jī)48小時以上；多模式設(shè)計(jì)，可進(jìn)行多種無線網(wǎng)絡(luò)兼容，TD-SCDMA-HSDPA/ HSUPA-HSPA+-LTE、(現(xiàn)有技術(shù)中的無線協(xié)議)，靈活的模塊化設(shè)計(jì)，使運(yùn)營商可以根據(jù)實(shí)際 網(wǎng)絡(luò)情況迅速變換，節(jié)省成本。b、VT視頻測試服務(wù)器12，用于同測試終端建立視頻呼叫，進(jìn)行編解碼設(shè)定，接收 并存儲測試終端發(fā)來的視頻信號，向測試終端播放VT視頻。本實(shí)施例中的是一種高性能的 視頻服務(wù)器，能夠同測試終端建立符合3GPP規(guī)范的視頻呼叫。C、結(jié)果分析服務(wù)器13，用于對測試終端和VT視頻測試服務(wù)器上傳的各種數(shù)據(jù)進(jìn) 行關(guān)聯(lián)分析，計(jì)算出測試結(jié)果；以便工程師能夠通過Web服務(wù)器查詢測試結(jié)果。d、中央數(shù)據(jù)庫14，用于存放結(jié)果分析服務(wù)器計(jì)算出的測試結(jié)果。e、短信應(yīng)用服務(wù)器15，通過與無線網(wǎng)絡(luò)的短信平臺相連，向測試終端發(fā)送通知短 信。該服務(wù)器提供了核心網(wǎng)和終端進(jìn)行短信命令控制的通道。f、在線升級服務(wù)器16，存放新定制的測試方案，供測試終端根據(jù)短信應(yīng)用服務(wù)器的通知短信來獲取。一旦工程師通過web服務(wù)器，確定了新的測試方案，測試方案即會被放 置在在線升級服務(wù)器上。相關(guān)的終端會根據(jù)短信命令來獲取最新的測試方案。g、Web服務(wù)器17，用于定制測試方案，以及顯示結(jié)果分析服務(wù)器計(jì)算出的測試結(jié) 果。該Web服務(wù)器能夠提供友善的人機(jī)接口，把復(fù)雜的短信和數(shù)據(jù)控制命令，用圖形化的 web方式展現(xiàn)給工程師。工程師通過Web服務(wù)器來進(jìn)行測試方案的定制。h、應(yīng)用邏輯服務(wù)器18，與所述測試終端、中央數(shù)據(jù)庫和各服務(wù)器相連接，所述測試 終端、中央數(shù)據(jù)庫和各服務(wù)器通過該應(yīng)用邏輯服務(wù)器交互數(shù)據(jù)。本實(shí)施例中，各核心網(wǎng)網(wǎng)元 通過應(yīng)用邏輯服務(wù)器統(tǒng)一調(diào)度，測試終端可以通過短信和數(shù)據(jù)兩種方式，由應(yīng)用邏輯服務(wù) 器統(tǒng)一調(diào)度。i、流媒體測試服務(wù)器19，用于同測試終端建立流媒體連接，使測試終端可以模擬 一個正常的流媒體視頻業(yè)務(wù)的使用者，從而進(jìn)行一系列流媒體測試。除了 a_i所述的各部分之外，本測試系統(tǒng)還可以包括GIS服務(wù)器，用于將測試結(jié)果 和地理信息相關(guān)聯(lián)，測試結(jié)果所代表的地理信息即可通過web服務(wù)器顯示出來，從而能夠 判斷某地點(diǎn)的測試結(jié)果。GIS服務(wù)器的作用除了結(jié)果呈現(xiàn)時有用，在運(yùn)營商工程師準(zhǔn)備選取 終端以便進(jìn)行實(shí)時測試時，也是通過web界面在地圖上選擇的。GIS服務(wù)器其實(shí)就是提供一 個地圖數(shù)據(jù)查詢接口，然后web服務(wù)器集成了這個接口，使web服務(wù)器可以顯示地圖，運(yùn)營 商工程師就可以很直觀地在地圖上面選擇終端進(jìn)行操作了。這樣工程師在用Web服務(wù)器進(jìn) 行數(shù)據(jù)查詢調(diào)用時，可以直觀地看到測試結(jié)果所代表的地理信息——當(dāng)前XX地點(diǎn)的XX測 試結(jié)果如何。前述的核心網(wǎng)為本領(lǐng)域泛指核心的那8種網(wǎng)元，包括所述的VT視頻測試服務(wù) 器、流媒體測試服務(wù)器、結(jié)果分析服務(wù)器、中央數(shù)據(jù)庫、短信應(yīng)用服務(wù)器、在線升級服務(wù)器、 Web服務(wù)器和應(yīng)用邏輯服務(wù)器，還可以包括GIS服務(wù)器。尤其是指VT視頻測試服務(wù)器和流 媒體測試服務(wù)器。在通信行業(yè)，放在機(jī)房里的可以統(tǒng)稱為核心網(wǎng)。各核心網(wǎng)網(wǎng)元通過應(yīng)用邏 輯服務(wù)器統(tǒng)一調(diào)度，測試終端可以通過短信和數(shù)據(jù)兩種方式，由應(yīng)用邏輯服務(wù)器統(tǒng)一調(diào)度。 而被測試的運(yùn)營商無線網(wǎng)絡(luò)中，有自己的核心網(wǎng)(移動網(wǎng)絡(luò)交換機(jī))和無線基站系統(tǒng)。上 述a-i中的裝置和GIS服務(wù)器，本領(lǐng)域技術(shù)人員是可以根據(jù)其知曉的相關(guān)知識和本說明書 公開的內(nèi)容，利用硬件和軟件的方法去具體的實(shí)現(xiàn)的。實(shí)施例2本發(fā)明中測試系統(tǒng)的測試方法分為終端對核心網(wǎng)，終端對終端的VT測試，以及流 媒體測試三種。下面首先介紹終端對核心網(wǎng)的VT測試方法，其又包括例行測試和實(shí)時測試 兩種。具體包括以下步驟步驟101、測試終端獲取例行測試方案或者實(shí)時測試方案。其中，例行測試時，本實(shí) 施例中，可以通過核心網(wǎng)事先制定例行測試方案下發(fā)測試終端，此后測試終端都按照這個 方案來進(jìn)行測試。測試方案內(nèi)容包括測試發(fā)起的時間，測試時所使用的源圖像文件，測試時 所使用的圖像編碼，測試時播放源圖像的時間長度等。實(shí)時測試時，本實(shí)施例中，工程師通 過web界面，制定測試方案，或者從數(shù)據(jù)庫提取已有測試方案，核心網(wǎng)通過短信服務(wù)器通知 終端，到在線升級服務(wù)器上取得測試方案，終端通過無線數(shù)據(jù)網(wǎng)絡(luò)或者WiFi網(wǎng)絡(luò)取得測試 方案，自我升級完畢后，通知核心網(wǎng)準(zhǔn)備就緒。測試終端的測試邏輯，均可以由應(yīng)用邏輯服 務(wù)器從數(shù)據(jù)庫中調(diào)用，或者由工程師人為從web界面定制后，下發(fā)測試計(jì)劃給某一測試終 端，進(jìn)行測試；也可以群發(fā)測試計(jì)劃給一部分甚至全部終端，進(jìn)行測試。
測試終端還可以通過預(yù)置測試流程，或者通過短信或者數(shù)據(jù)方式實(shí)時進(jìn)行測試。 即測試終端中，有一個“測試時刻表”，比如早上9 00，對A進(jìn)行一次視頻測試；早上9 10， 對B進(jìn)行兩次視頻測試等，晚上12:00，測試終端自動重啟一次。實(shí)時測試的方式是指，在上 午9 35分27秒時，本來預(yù)置測試流程中沒有這個測試，但是可能工程師需要立刻知道這個 點(diǎn)當(dāng)前的狀態(tài)，就會讓系統(tǒng)發(fā)一條特殊的短信去，讓終端進(jìn)行某種測試。步驟102、在預(yù)定的時間，VT視頻測試服務(wù)器向指定的測試終端發(fā)起VT呼叫，根據(jù) 測試方案的內(nèi)容(號碼、編碼等VT呼叫相關(guān)的信息)建立VT呼叫連接。步驟103、雙方進(jìn)行VT視頻同步。本實(shí)施例中，測試終端發(fā)送若干幀預(yù)設(shè)圖像到 VT視頻測試服務(wù)器，表示在該預(yù)設(shè)圖像播放完后的時間點(diǎn)時測試終端將開始播放標(biāo)準(zhǔn)視頻 文件，VT視頻測試服務(wù)器收到該預(yù)設(shè)圖像后準(zhǔn)備錄像。該預(yù)設(shè)圖像可以為特殊圖像，從簡 化出發(fā)，可定義為全紅、全藍(lán)、全綠，如全紅3幀、全藍(lán)3幀、全綠3幀，即可以是標(biāo)準(zhǔn)視頻文 件中不會出現(xiàn)的圖像。表示在該特殊圖像全綠3幀播放完后的時間點(diǎn)時源端將開始播放標(biāo) 準(zhǔn)視頻文件。步驟104、所述特殊圖像播放完的時間點(diǎn)到達(dá)后，測試終端開始向VT視頻測試服 務(wù)器按照VT呼叫的格式，播放指定的源視頻文件進(jìn)行測試，VT視頻測試服務(wù)器同時開始錄 像，測試終端播放測試方案中指定的測試時間后停止，VT視頻測試服務(wù)器在測試時間結(jié)束 時停止錄像并存儲該錄像，測試終端同時采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間。舉例如 下在2009年10月14日下午3點(diǎn)18分28秒，VT視頻測試服務(wù)器向終端發(fā)起一個VT呼 叫，同步完成后，終端向服務(wù)器按照MPEG4的編碼，向服務(wù)器播放指定的視頻文件testOl. wave共8秒鐘。同時采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間。當(dāng)前測試時間包括VT呼叫開 始的時間、同步的時間和播放結(jié)束的時間。這個時間是可選的，可能是播放視頻文件結(jié)束的 時間，也可以是同步接受的時間，也可以是測試開始的時間，只要是工程師約定好即可，因 為這個時間只是記錄到log文件中的。如果后面測試發(fā)現(xiàn)效果不佳的話，工程師可以根據(jù) 這個時間找到相應(yīng)的網(wǎng)絡(luò)參數(shù)，來進(jìn)行深層次的分析，找出效果不佳的底層原因所在，從而 制定出對于這部分網(wǎng)絡(luò)的優(yōu)化策略。步驟105、VT視頻測試服務(wù)器停止錄像后，重新和測試終端進(jìn)行第二次視頻同步。 原理同步驟103。這個同步的原因在于，運(yùn)算單元的算法對于源錄像文件和生成的錄像文件 的開始時間的同步要求非常嚴(yán)格(不得超過320毫秒)，如果不進(jìn)行同步，考慮到系統(tǒng)動作 時延、網(wǎng)絡(luò)時延等因素，有可能造成第二次測試結(jié)果不準(zhǔn)確。步驟106、VT視頻測試服務(wù)器開始向測試終端按照VT呼叫的格式，播放指定的源 視頻文件進(jìn)行測試，測試終端同時開始錄像，VT視頻測試服務(wù)器播放測試方案中指定的測 試時間后停止，測試終端在測試時間結(jié)束時停止錄像并存儲該錄像，測試終端同時采集無 線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間。這個步驟同步驟104，不同之處在于，步驟104是測試終端 向VT測試服務(wù)器播放視頻，測試的是“終端到服務(wù)器”方向的視頻質(zhì)量。步驟106為VT視 頻終端服務(wù)器向測試終端播放視頻，測試的是“服務(wù)器到終端”方向的視頻質(zhì)量。步驟107、測試終端和VT視頻測試服務(wù)器都斷開VT呼叫，測試終端和VT視頻測試 服務(wù)器上傳測試數(shù)據(jù)到結(jié)果分析服務(wù)器。測試數(shù)據(jù)包括測試終端或者VT視頻測試服務(wù)器 所生成的錄像文件，以及測試終端采集的無線網(wǎng)絡(luò)參數(shù)。測試時，可以根據(jù)用戶的需要，選 擇視頻通話時采集無線網(wǎng)絡(luò)參數(shù)，或者不采集無線網(wǎng)絡(luò)參數(shù)。如果采集，那么發(fā)現(xiàn)視頻質(zhì)量問題時就有分析依據(jù)，如果不采集，那么就只是單純的測試一下視頻質(zhì)量，也是一種方法， 完全由運(yùn)營商的工程師來選擇。步驟108、結(jié)果分析服務(wù)器將測試終端或者VT視頻測試服務(wù)器上傳的文件同源文 件進(jìn)行對比計(jì)算，計(jì)算結(jié)果即為VT視頻的用戶感知結(jié)果，然后將該結(jié)果存到中央數(shù)據(jù)庫中 供測試人員查詢調(diào)用。如根據(jù)PEVQ算法(現(xiàn)有技術(shù)中的一種算法)計(jì)算出MOS值，視頻的 指標(biāo)有很多，在PEVQ算法中都能夠包括，比如PSNR參數(shù)，比如失真度、碼流損傷、平滑度指 標(biāo)等等，至少有十幾個參數(shù)，在此不一一列舉。之后，工程師可以通過web服務(wù)器和GIS服務(wù) 器提供的圖形界面，來查詢這些運(yùn)算結(jié)果。采用GIS服務(wù)器將測試結(jié)果和地理信息相關(guān)聯(lián)， 測試結(jié)果所代表的地理信息即可通過web服務(wù)器顯示出來，從而能夠判斷某地點(diǎn)的測試結(jié)果。上述步驟101 108，本領(lǐng)域技術(shù)人員是可以根據(jù)其知曉的相關(guān)知識和本說明書 公開的內(nèi)容去具體的實(shí)現(xiàn)的，每個步驟的具體實(shí)現(xiàn)是本領(lǐng)域的現(xiàn)有技術(shù)，并非本發(fā)明的發(fā) 明點(diǎn)所在。實(shí)施例3下面介紹終端對終端的測試方法，其又包括例行測試和實(shí)時測試兩種，該測試系 統(tǒng)中的測試終端包括主叫測試終端和被叫測試終端。具體包括以下步驟步驟201、所述主叫和被叫測試終端獲取例行測試方案或者實(shí)時測試方案。本實(shí)施 例中，獲取例行測試方案和實(shí)時測試方案的方法以及測試方案的內(nèi)容，與實(shí)施例2中的基 本相同，不再贅述。步驟202、在預(yù)定的時間，主叫測試終端向被叫測試終端發(fā)起VT呼叫，根據(jù)所述測 試方案的內(nèi)容(號碼、編碼等VT呼叫相關(guān)的信息)建立VT呼叫連接。步驟203、主叫和被叫測試終端進(jìn)行VT視頻同步。同步的方法與實(shí)施例2中的相 同，不再贅述。步驟204、被叫測試終端開始向主叫測試終端按照VT呼叫的格式，播放指定的源 視頻文件進(jìn)行測試，主叫測試終端同時開始錄像，被叫測試終端播放測試方案中指定的測 試時間后停止，主叫測試終端在測試時間結(jié)束后停止錄像，并存儲該錄像，同時主叫測試終 端和被叫測試終端都采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間。當(dāng)前測試時間包括VT呼叫開 始的時間、同步的時間和播放結(jié)束的時間。如果后面測試發(fā)現(xiàn)效果不佳的話，工程師可以根 據(jù)這個時間找到相應(yīng)的網(wǎng)絡(luò)參數(shù)，來進(jìn)行深層次的分析，找出效果不佳的底層原因所在，從 而制定出對于這部分網(wǎng)絡(luò)的優(yōu)化策略。這里的主被叫測試終端可以互換。步驟205、主叫測試終端停止錄像后，重新和被叫測試終端進(jìn)行第二次視頻同步， 第二次同步的原因同實(shí)施例2，這里不再贅述。步驟206、主叫測試終端開始向被叫測試終端按照VT呼叫的格式，播放指定的源 視頻文件進(jìn)行測試，被叫測試終端同時開始錄像，主叫測試終端播放測試方案中指定的測 試時間后停止，被叫測試終端在測試時間結(jié)束后停止錄像，并存儲該錄像，同時主叫測試終 端和被叫測試終端都采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間。步驟207、主叫測試終端和被叫測試終端都斷開VT呼叫，主叫和被叫測試終端分 別上傳測試數(shù)據(jù)到結(jié)果分析服務(wù)器。其中測試數(shù)據(jù)的內(nèi)容同實(shí)施例2，這里不再贅述。步驟208、結(jié)果分析服務(wù)器將主叫和被叫測試終端上傳的文件同源文件進(jìn)行對比計(jì)算，計(jì)算結(jié)果即為VT視頻的用戶感知結(jié)果，然后將該結(jié)果存到中央數(shù)據(jù)庫中供測試人員 查詢調(diào)用。計(jì)算結(jié)果的具體內(nèi)容同實(shí)施例2，這里不再贅述。之后，工程師可以通過web服 務(wù)器和GIS服務(wù)器提供的圖形界面，來查詢這些運(yùn)算結(jié)果。采用GIS服務(wù)器將測試結(jié)果和 地理信息相關(guān)聯(lián)，測試結(jié)果所代表的地理信息即可通過web服務(wù)器顯示出來，從而能夠判 斷某地點(diǎn)的測試結(jié)果。上述步驟201 208，本領(lǐng)域技術(shù)人員是可以根據(jù)其知曉的相關(guān)知識和本說明書 公開的內(nèi)容去具體的實(shí)現(xiàn)的，每個步驟的具體實(shí)現(xiàn)是本領(lǐng)域的現(xiàn)有技術(shù)，并非本發(fā)明的發(fā) 明點(diǎn)所在。實(shí)施例4下面介紹流媒體測試方法，具體包括以下步驟步驟301、測試終端獲取例行測試方案或者實(shí)時測試方案。本實(shí)施例中，獲取例行 測試方案和實(shí)時測試方案的方法以及測試方案的內(nèi)容，與實(shí)施例2中的基本相同，不再贅 述。步驟302、在預(yù)定的時間，測試終端根據(jù)測試方案中的參數(shù)，建立流媒體連接，根據(jù) 測試方案的內(nèi)容(號碼、編碼等VT呼叫相關(guān)的信息)向流媒體測試服務(wù)器發(fā)起測試請求， 接受流媒體視頻。步驟303、雙方進(jìn)行流媒體測試同步。同步的方法與實(shí)施例2中的相同，不再贅述。步驟304、流媒體測試服務(wù)器向測試終端播放指定的源視頻流媒體文件，測試終端 同時開始錄像，流媒體測試服務(wù)器播放測試方案中指定的測試時間后停止，測試終端在測 試時間結(jié)束時停止錄像并存儲該錄像，測試終端同時采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時 間。舉例如下在2009年10月14日下午3點(diǎn)18分28秒，測試終端向流媒體測試服務(wù)器 發(fā)起一個流媒體測試請求，同步完成后，流媒體服務(wù)器按照H. ^3pr0file 0 level 10的編 碼，向終端播放指定的流媒體測試視頻文件streamtestOl. wave共8秒鐘。與此同時測試 終端進(jìn)行無線網(wǎng)絡(luò)參數(shù)采集，記錄當(dāng)前測試時間(同實(shí)施例幻。如果后面測試發(fā)現(xiàn)效果不 佳的話，工程師可以根據(jù)這個時間找到相應(yīng)的網(wǎng)絡(luò)參數(shù)，來進(jìn)行深層次的分析，找出效果不 佳的底層原因所在，從而制定出對于這部分網(wǎng)絡(luò)的優(yōu)化策略。步驟305、測試終端和流媒體測試服務(wù)器都斷開流媒體連接，測試終端上傳測試數(shù) 據(jù)到結(jié)果分析服務(wù)器。其中測試數(shù)據(jù)的內(nèi)容同實(shí)施例2，這里不再贅述。步驟306、結(jié)果分析服務(wù)器將測試終端上傳的文件同源文件進(jìn)行對比計(jì)算，計(jì)算 結(jié)果即為流媒體業(yè)務(wù)的用戶感知結(jié)果，然后將該結(jié)果存到中央數(shù)據(jù)庫中供測試人員查詢調(diào) 用。計(jì)算結(jié)果的具體內(nèi)容同實(shí)施例2，這里不再贅述。之后，工程師可以通過web服務(wù)器和 GIS服務(wù)器提供的圖形界面，來查詢這些運(yùn)算結(jié)果。采用GIS服務(wù)器將測試結(jié)果和地理信息 相關(guān)聯(lián)，測試結(jié)果所代表的地理信息即可通過web服務(wù)器顯示出來，從而能夠判斷某地點(diǎn) 的測試結(jié)果。上述步驟301 306，本領(lǐng)域技術(shù)人員是可以根據(jù)其知曉的相關(guān)知識和本說明書 公開的內(nèi)容去具體的實(shí)現(xiàn)的，每個步驟的具體實(shí)現(xiàn)是本領(lǐng)域的現(xiàn)有技術(shù)，并非本發(fā)明的發(fā) 明點(diǎn)所在。以上英文簡寫的協(xié)議和算法均為現(xiàn)有技術(shù)，在此不再贅述。綜上所述，本發(fā)明公開了一種對無線TD-SCDMA制式下，對視頻電話和流媒體業(yè)務(wù) 用戶的用戶感知效果進(jìn)行測試的系統(tǒng)和方法。其采用無人職守的TD-SCDMA測試終端、短信
15平臺、web服務(wù)器、VT (Video Tel印hony，即視頻通話)測試服務(wù)器、時間同步系統(tǒng)、流媒體 服務(wù)器、運(yùn)算單元和測試管理平臺所構(gòu)架的系統(tǒng)，來對無線網(wǎng)絡(luò)下的視頻電話和流媒體的 用戶感知效果進(jìn)行檢測，終端在測試時，會同步采集當(dāng)前無線網(wǎng)絡(luò)的參數(shù)，以提供運(yùn)營商工 程師進(jìn)行深層次分析的數(shù)據(jù)和依據(jù)。該方法利用管理平臺向測試終端發(fā)起測量方案，測試 終端根據(jù)測試方案，在指定的時間，進(jìn)行指定的VT或者流媒體用戶感知測試，模擬用戶行 為，進(jìn)行一段視頻短片的VT通信或者流媒體格式的視頻播放，得到接受端的圖像錄像。接 下來終端將把這段錄像數(shù)據(jù)上傳到測試系統(tǒng)，由運(yùn)算單元根據(jù)PEVQ，或者M(jìn)DI，或者其他的 算法，來對這段錄像同源錄像進(jìn)行比對運(yùn)算，得出測試結(jié)果并且存入到數(shù)據(jù)庫中。工程師可 以通過web服務(wù)器、數(shù)據(jù)庫查詢、文件瀏覽等多種方式查詢測試結(jié)果。同時終端還會將同步 采集的無線參數(shù)記錄數(shù)據(jù)也上傳到數(shù)據(jù)庫，以供運(yùn)營商的工程師進(jìn)行深層次的問題分析。 可見本發(fā)明的主要改進(jìn)在于一、在系統(tǒng)構(gòu)成上與現(xiàn)有的不同?，F(xiàn)有的視頻測試設(shè)備需要關(guān)聯(lián)便攜式電腦、測 試手機(jī)、專業(yè)視頻測試軟件設(shè)備等復(fù)雜的測試設(shè)備，而本發(fā)明通過嵌入式終端平臺構(gòu)筑測 試終端，采用移動通信技術(shù)完成核心網(wǎng)的數(shù)據(jù)關(guān)聯(lián)、數(shù)據(jù)的時間和地理信息關(guān)聯(lián)，是一種智 能的自動測試系統(tǒng)。現(xiàn)有的方法，因?yàn)楸仨毠こ處煬F(xiàn)場操作，工程師通過筆記本電腦，連接 modem(調(diào)制解調(diào)器)，連接測試手機(jī)，跑到測試的地方，才能進(jìn)行測試，而且只能同時進(jìn)行 一個地點(diǎn)的測試，不能同時進(jìn)行多個地點(diǎn)的測試，碰上交通擁擠，堵車等，效率都很低。本發(fā)明由于把現(xiàn)有的“工程師帶著計(jì)算機(jī)、modem、手機(jī)到現(xiàn)場，工程師人工操作 測試軟件進(jìn)行相應(yīng)的測試參數(shù)設(shè)置，測試行為發(fā)起，測試數(shù)據(jù)記錄”等工作，集成到一個測 試終端上，這個測試終端是常年部署在測試地點(diǎn)，通過220V交流電供電的。這樣大大提高 了測試的效率(想測多少測多少，想怎么測試就怎么測試，想什么時候測試就什么時候測 試)，降低了費(fèi)用(有經(jīng)驗(yàn)的工程師的人工都很貴，加上在各個測試地點(diǎn)之間往返的交通費(fèi) 用)。二、以往的視頻質(zhì)量測試，需要非常專業(yè)的工程師，攜帶貴重的測試儀表，奔赴故 障點(diǎn)進(jìn)行測試。移動網(wǎng)絡(luò)中的各種情況瞬息萬變，擁塞狀況也隨著人流地快速移動而快速 改變。往往工程師還沒有到達(dá)故障點(diǎn)，故障已經(jīng)消失了，無法做到實(shí)時測試，實(shí)時發(fā)現(xiàn)，實(shí)時 分析解決。該系統(tǒng)的終端分為車載和固定兩種。對于需要重點(diǎn)監(jiān)控的區(qū)域，部署固定終端進(jìn) 行監(jiān)控，一旦發(fā)現(xiàn)問題，工程師無須趕到現(xiàn)場，通過網(wǎng)絡(luò)遠(yuǎn)程操作終端進(jìn)行特定的測試方 案，即可分析判斷出網(wǎng)絡(luò)的問題所在；車載終端更是可以安裝在車輛上，對網(wǎng)絡(luò)進(jìn)行長期、 實(shí)時的測試和和監(jiān)控。測試區(qū)域也包括了道路區(qū)域，使測試結(jié)果更加全面。三、通常視頻質(zhì)量的測試儀表都非常復(fù)雜，導(dǎo)致成本居高不下。而該系統(tǒng)的測試 終端采用嵌入式平臺，通過軟件技術(shù)和無線通信技術(shù)，將終端和系統(tǒng)關(guān)聯(lián)起來，達(dá)到如下優(yōu)占.
^ \\\ ·實(shí)時性一旦產(chǎn)生測試需求，工程師通過web界面定制測試方案，下載測試方案， 到終端開始執(zhí)行測試，最快可以在1分鐘以內(nèi)完成，相比傳統(tǒng)手段，在效率上有革命性的創(chuàng)新。數(shù)據(jù)上傳手段多樣充分利用現(xiàn)代通信網(wǎng)絡(luò)的特點(diǎn)，可以通過多種手段上傳數(shù)據(jù)， 包括但是不限于短信、TD-SCDMA, HSDPA, HSUPA, HSPA+, LTE、WiFi (以上均為現(xiàn)有技術(shù)中的無線協(xié)議)等，使核心網(wǎng)工程師可以快速得到測試數(shù)據(jù)，以便迅速分析。無人職守終端的測試可以分為例行測試和實(shí)時測試兩種。例行測試情況下，無須 人工干預(yù)，終端即可自行進(jìn)行測試，做到真正的7* 小時監(jiān)控?zé)o線網(wǎng)絡(luò)狀況。雖然以上描述了本發(fā)明的具體實(shí)施方式
，但是本領(lǐng)域的技術(shù)人員應(yīng)當(dāng)理解，這些 僅是舉例說明，在不背離本發(fā)明的原理和實(shí)質(zhì)的前提下，可以對這些實(shí)施方式做出多種變 更或修改。因此，本發(fā)明的保護(hù)范圍由所附權(quán)利要求書限定。
權(quán)利要求
1.一種視頻電話和流媒體的用戶感知效果的測試系統(tǒng)，其特征在于，其包括測試終端，用于通過無線網(wǎng)絡(luò)，與核心網(wǎng)或者其他測試終端進(jìn)行VT測試，該終端支持 TD-SCDMA 制式的無線空中協(xié)議、HSDPA/HSUPA、HSDPA+ 或 LTE ；VT視頻測試服務(wù)器，用于同測試終端建立視頻呼叫，進(jìn)行編解碼設(shè)定，接收并存儲測試 終端發(fā)來的視頻信號，向測試終端播放VT視頻；結(jié)果分析服務(wù)器，用于對測試終端和VT視頻測試服務(wù)器上傳的各種數(shù)據(jù)進(jìn)行關(guān)聯(lián)分 析，計(jì)算出測試結(jié)果；流媒體測試服務(wù)器，用于同測試終端建立流媒體連接，使測試終端可以模擬一個正常 的流媒體視頻業(yè)務(wù)的使用者，從而進(jìn)行一系列流媒體測試； 中央數(shù)據(jù)庫，用于存放結(jié)果分析服務(wù)器計(jì)算出的測試結(jié)果； 短信應(yīng)用服務(wù)器，通過與無線網(wǎng)絡(luò)的短信平臺相連，向測試終端發(fā)送通知短信； 在線升級服務(wù)器，存放新定制的測試方案，供測試終端根據(jù)短信應(yīng)用服務(wù)器的通知短 信來獲?。籛eb服務(wù)器，用于定制測試方案，以及顯示結(jié)果分析服務(wù)器計(jì)算出的測試結(jié)果；及 應(yīng)用邏輯服務(wù)器，與所述測試終端、中央數(shù)據(jù)庫和各服務(wù)器相連接，所述測試終端、中 央數(shù)據(jù)庫和各服務(wù)器通過該應(yīng)用邏輯服務(wù)器交互數(shù)據(jù)。
2.如權(quán)利要求1所述的測試系統(tǒng)，其特征在于，該測試系統(tǒng)還包括GIS服務(wù)器，用于將 測試結(jié)果和地理信息相關(guān)聯(lián)，測試結(jié)果所代表的地理信息即可通過web服務(wù)器顯示出來， 從而能夠判斷某地點(diǎn)的測試結(jié)果。
3.如權(quán)利要求1或2所述的測試系統(tǒng)，其特征在于，所述核心網(wǎng)包括所述的VT視頻測 試服務(wù)器、流媒體測試服務(wù)器、結(jié)果分析服務(wù)器、中央數(shù)據(jù)庫、短信應(yīng)用服務(wù)器、在線升級服 務(wù)器、Web服務(wù)器和應(yīng)用邏輯服務(wù)器。
4.一種如權(quán)利要求1所述的測試系統(tǒng)的測試方法，其特征在于，其包括以下步驟 S1、測試終端獲取例行測試方案或者實(shí)時測試方案；S2、在預(yù)定的時間，VT視頻測試服務(wù)器向指定的測試終端發(fā)起VT呼叫，根據(jù)測試方案的 內(nèi)容建立VT呼叫連接；S3、雙方進(jìn)行VT視頻同步，測試終端發(fā)送若干幀預(yù)設(shè)圖像到VT視頻測試服務(wù)器，表示 在該預(yù)設(shè)圖像播放完后的時間點(diǎn)時測試終端將開始播放標(biāo)準(zhǔn)視頻文件，VT視頻測試服務(wù)器 收到該預(yù)設(shè)圖像后準(zhǔn)備錄像；S4、所述預(yù)設(shè)圖像播放完的時間點(diǎn)到達(dá)后，測試終端開始向VT視頻測試服務(wù)器按照VT 呼叫的格式，播放指定的源視頻文件進(jìn)行測試，VT視頻測試服務(wù)器同時開始錄像，測試終端 播放測試方案中指定的測試時間后停止，VT視頻測試服務(wù)器在測試時間結(jié)束時停止錄像并 存儲該錄像，測試終端同時采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間；s5、VT視頻測試服務(wù)器停止錄像后，重新和測試終端進(jìn)行第二次視頻同步；S6,VT視頻測試服務(wù)器開始向測試終端按照VT呼叫的格式，播放指定的源視頻文件進(jìn) 行測試，測試終端同時開始錄像，VT視頻測試服務(wù)器播放測試方案中指定的測試時間后停 止，測試終端在測試時間結(jié)束時停止錄像并存儲該錄像，測試終端同時采集無線網(wǎng)絡(luò)參數(shù)， 記錄當(dāng)前測試時間；S7、測試終端和VT視頻測試服務(wù)器都斷開VT呼叫，測試終端和VT視頻測試服務(wù)器上傳測試數(shù)據(jù)到結(jié)果分析服務(wù)器；S8、結(jié)果分析服務(wù)器將測試終端或者VT視頻測試服務(wù)器上傳的文件同源文件進(jìn)行對比 計(jì)算，計(jì)算結(jié)果即為VT視頻的用戶感知結(jié)果，然后將該結(jié)果存到中央數(shù)據(jù)庫中供測試人員 查詢調(diào)用。
5.如權(quán)利要求4所述的測試系統(tǒng)的測試方法，其特征在于，步驟S1中，核心網(wǎng)事先制定 例行測試方案下發(fā)到測試終端，測試終端再按照該測試方案進(jìn)行測試。
6.如權(quán)利要求5所述的測試系統(tǒng)的測試方法，其特征在于，所述核心網(wǎng)包括權(quán)利要求1 所述的VT視頻測試服務(wù)器、流媒體測試服務(wù)器、結(jié)果分析服務(wù)器、中央數(shù)據(jù)庫、短信應(yīng)用服 務(wù)器、在線升級服務(wù)器、Web服務(wù)器和應(yīng)用邏輯服務(wù)器。
7.如權(quán)利要求4所述的測試系統(tǒng)的測試方法，其特征在于，步驟S1中，通過web服務(wù)器 的web界面制定實(shí)時測試方案，核心網(wǎng)通過短信應(yīng)用服務(wù)器通知測試終端到在線升級服務(wù) 器上取得該測試方案，進(jìn)行測試。
8.如權(quán)利要求4所述的測試系統(tǒng)的測試方法，其特征在于，步驟S1中，所述測試方案的 內(nèi)容包括測試發(fā)起的時間，測試時所使用的源圖像文件，測試時所使用的圖像編碼和測試 時播放源圖像的時間長度。
9.如權(quán)利要求4所述的測試系統(tǒng)的測試方法，其特征在于，步驟、和&中的當(dāng)前測試 時間包括VT呼叫開始的時間、同步的時間和播放結(jié)束的時間。
10.如權(quán)利要求4所述的測試系統(tǒng)的測試方法，其特征在于，步驟S7中的測試數(shù)據(jù)包括 測試終端或者VT視頻測試服務(wù)器所生成的錄像文件，以及測試終端采集的無線網(wǎng)絡(luò)參數(shù)。
11.如權(quán)利要求4所述的測試系統(tǒng)的測試方法，其特征在于，步驟S8中的計(jì)算結(jié)果為根 據(jù)PEVQ算法計(jì)算出的MOS值、PSNR參數(shù)、失真度、碼流損傷和平滑度指標(biāo)中的一種或多種。
12.如權(quán)利要求4所述的測試系統(tǒng)的測試方法，其特征在于，所述的測試系統(tǒng)包括GIS 服務(wù)器，步驟S8中，測試人員通過web服務(wù)器和GIS服務(wù)器提供的圖形界面，查詢所述計(jì)算 結(jié)果。
13.一種如權(quán)利要求1所述的測試系統(tǒng)的測試方法，該測試系統(tǒng)中的測試終端包括主 叫測試終端和被叫測試終端，其特征在于，其包括以下步驟T1、所述主叫和被叫測試終端獲取例行測試方案或者實(shí)時測試方案；T2、在預(yù)定的時間，主叫測試終端向被叫測試終端發(fā)起VT呼叫，根據(jù)所述測試方案的內(nèi) 容建立VT呼叫連接；T3、主叫和被叫測試終端進(jìn)行VT視頻同步，被叫測試終端發(fā)送若干幀預(yù)設(shè)圖像到主叫 測試終端，表示在該預(yù)設(shè)圖像播放完后的時間點(diǎn)時被叫測試終端將開始播放標(biāo)準(zhǔn)視頻文 件，主叫測試終端收到該預(yù)設(shè)圖像后準(zhǔn)備錄像；T4、所述預(yù)設(shè)圖像播放完的時間點(diǎn)到達(dá)后，被叫測試終端開始向主叫測試終端按照VT 呼叫的格式，播放指定的源視頻文件進(jìn)行測試，主叫測試終端同時開始錄像，被叫測試終端 播放測試方案中指定的測試時間后停止，主叫測試終端在測試時間結(jié)束后停止錄像，并存 儲該錄像，同時主叫測試終端和被叫測試終端都采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間；T5、主叫測試終端停止錄像后，重新和被叫測試終端進(jìn)行第二次視頻同步；T6、主叫測試終端開始向被叫測試終端按照VT呼叫的格式，播放指定的源視頻文件進(jìn) 行測試，被叫測試終端同時開始錄像，主叫測試終端播放測試方案中指定的測試時間后停止，被叫測試終端在測試時間結(jié)束后停止錄像，并存儲該錄像，同時主叫測試終端和被叫測 試終端都采集無線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間；T7、主叫測試終端和被叫測試終端都斷開VT呼叫，主叫和被叫測試終端分別上傳測試 數(shù)據(jù)到結(jié)果分析服務(wù)器；Τ8、結(jié)果分析服務(wù)器將主叫和被叫測試終端上傳的文件同源文件進(jìn)行對比計(jì)算，計(jì)算 結(jié)果即為VT視頻的用戶感知結(jié)果，然后將該結(jié)果存到中央數(shù)據(jù)庫中供測試人員查詢調(diào)用。
14.如權(quán)利要求13所述的測試系統(tǒng)的測試方法，其特征在于，步驟T1中，核心網(wǎng)事先制 定例行測試方案下發(fā)到測試終端，測試終端再按照該測試方案進(jìn)行測試。
15.如權(quán)利要求14所述的測試系統(tǒng)的測試方法，其特征在于，所述核心網(wǎng)包括權(quán)利要 求1所述的VT視頻測試服務(wù)器、流媒體測試服務(wù)器、結(jié)果分析服務(wù)器、中央數(shù)據(jù)庫、短信應(yīng) 用服務(wù)器、在線升級服務(wù)器、Web服務(wù)器和應(yīng)用邏輯服務(wù)器。
16.如權(quán)利要求13所述的測試系統(tǒng)的測試方法，其特征在于，步驟T1中，通過web服務(wù) 器的web界面制定實(shí)時測試方案，核心網(wǎng)通過短信應(yīng)用服務(wù)器通知測試終端到在線升級服 務(wù)器上取得該測試方案，進(jìn)行測試。
17.如權(quán)利要求13所述的測試系統(tǒng)的測試方法，其特征在于，步驟T4和T6中的當(dāng)前測 試時間包括VT呼叫開始的時間、同步的時間和播放結(jié)束的時間。
18.如權(quán)利要求13所述的測試系統(tǒng)的測試方法，其特征在于，步驟T7中的測試數(shù)據(jù) 包括主叫和被叫測試終端所生成的錄像文件，以及主叫和被叫測試終端采集的無線網(wǎng)絡(luò)參 數(shù)。
19.如權(quán)利要求13所述的測試系統(tǒng)的測試方法，其特征在于，步驟T8中的計(jì)算結(jié)果為 根據(jù)PEVQ算法計(jì)算出的MOS值、PSNR參數(shù)、失真度、碼流損傷和平滑度指標(biāo)中的一種或多 種。
20.一種如權(quán)利要求1所述的測試系統(tǒng)的流媒體測試方法，其特征在于，其包括以下步驟U1、測試終端獲取例行測試方案或者實(shí)時測試方案；U2、在預(yù)定的時間，測試終端根據(jù)測試方案中的參數(shù)，建立流媒體連接，根據(jù)測試方案 的內(nèi)容向流媒體測試服務(wù)器發(fā)起測試請求，接受流媒體視頻；U3、雙方進(jìn)行流媒體測試同步，流媒體測試服務(wù)器發(fā)送若干幀預(yù)設(shè)圖像到測試終端，表 示在該預(yù)設(shè)圖像播放完后的時間點(diǎn)時流媒體測試服務(wù)器將開始播放標(biāo)準(zhǔn)視頻文件，測試終 端收到該預(yù)設(shè)圖像后準(zhǔn)備錄像；U4、所述預(yù)設(shè)圖像播放完的時間點(diǎn)到達(dá)后，流媒體測試服務(wù)器向測試終端播放指定的 源視頻流媒體文件，測試終端同時開始錄像，流媒體測試服務(wù)器播放測試方案中指定的測 試時間后停止，測試終端在測試時間結(jié)束時停止錄像并存儲該錄像，測試終端同時采集無 線網(wǎng)絡(luò)參數(shù)，記錄當(dāng)前測試時間；U5、測試終端和流媒體測試服務(wù)器都斷開流媒體連接，測試終端上傳測試數(shù)據(jù)到結(jié)果 分析服務(wù)器；U6、結(jié)果分析服務(wù)器將測試終端上傳的文件同源文件進(jìn)行對比計(jì)算，計(jì)算結(jié)果即為流 媒體業(yè)務(wù)的用戶感知結(jié)果，然后將該結(jié)果存到中央數(shù)據(jù)庫中供測試人員查詢調(diào)用。
21.如權(quán)利要求20所述的測試系統(tǒng)的測試方法，其特征在于，步驟仏中，核心網(wǎng)事先制定例行測試方案下發(fā)到測試終端，測試終端再按照該測試方案進(jìn)行測試。
22.如權(quán)利要求21所述的測試系統(tǒng)的測試方法，其特征在于，所述核心網(wǎng)包括權(quán)利要 求1所述的VT視頻測試服務(wù)器、流媒體測試服務(wù)器、結(jié)果分析服務(wù)器、中央數(shù)據(jù)庫、短信應(yīng) 用服務(wù)器、在線升級服務(wù)器、Web服務(wù)器和應(yīng)用邏輯服務(wù)器。
23.如權(quán)利要求20所述的測試系統(tǒng)的測試方法，其特征在于，步驟仏中，通過web服務(wù) 器的web界面制定實(shí)時測試方案，核心網(wǎng)通過短信應(yīng)用服務(wù)器通知測試終端到在線升級服 務(wù)器上取得該測試方案，進(jìn)行測試。
24.如權(quán)利要求20所述的測試系統(tǒng)的測試方法，其特征在于，步驟仏中，所述測試方案 的內(nèi)容包括測試發(fā)起的時間，測試時所使用的源圖像文件，測試時所使用的圖像編碼和測 試時播放源圖像的時間長度。
25.如權(quán)利要求20所述的測試系統(tǒng)的測試方法，其特征在于，步驟U5中的測試數(shù)據(jù)包 括測試終端所生成的錄像文件，以及測試終端采集的無線網(wǎng)絡(luò)參數(shù)。
26.如權(quán)利要求20所述的測試系統(tǒng)的測試方法，其特征在于，步驟U6中的計(jì)算結(jié)果為 根據(jù)PEVQ算法計(jì)算出的MOS值、PSNR參數(shù)、失真度、碼流損傷和平滑度指標(biāo)中的一種或多 種。
全文摘要
本發(fā)明公開了一種視頻電話和流媒體的用戶感知效果的測試系統(tǒng)和測試方法，應(yīng)用于TD-SCDMA/HSDPA/HSUPA/HSPA+/LTE制式下的視頻業(yè)務(wù)，該系統(tǒng)包括TD-SCDMA制式測試終端，VT視頻測試服務(wù)器，結(jié)果分析服務(wù)器，流媒體測試服務(wù)器，中央數(shù)據(jù)庫，短信應(yīng)用服務(wù)器，在線升級服務(wù)器，Web服務(wù)器及應(yīng)用邏輯服務(wù)器，所述測試終端、中央數(shù)據(jù)庫和各服務(wù)器通過該應(yīng)用邏輯服務(wù)器交互數(shù)據(jù)。本發(fā)明為一種靈活部署、無人職守運(yùn)作、遠(yuǎn)程控制、遠(yuǎn)程升級并且易于使用的TD-SCDMA/HSDPA/HSUPA/HSPA+/LTE無線網(wǎng)絡(luò)視頻業(yè)務(wù)(如視頻電話和流媒體業(yè)務(wù))用戶感知效果測試系統(tǒng)?？梢苑奖愀咝У貦z測無線網(wǎng)絡(luò)中VT和流媒體業(yè)務(wù)的運(yùn)行質(zhì)量，通過在不同的環(huán)境中布置測試終端，無須用大量的人力物力，卻能得到大量測試點(diǎn)的7*24小時測試結(jié)果。
文檔編號H04N17/00GK102075781SQ200910199119
公開日2011年5月25日 申請日期2009年11月20日 優(yōu)先權(quán)日2009年11月20日
發(fā)明者張一 申請人:上海倍亞得信息技術(shù)有限公司