專利名稱：模擬用戶行為的移動(dòng)流媒體業(yè)務(wù)感知體驗(yàn)QoE的測(cè)評(píng)方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種測(cè)量和評(píng)估移動(dòng)流媒體業(yè)務(wù)用戶體驗(yàn)感知QoE (Quality ofExperience)的方法，確切地說，涉及一種模擬用戶的操作行為，并測(cè)試用戶對(duì)移動(dòng)流媒體業(yè)務(wù)的感知體驗(yàn)，再基于指標(biāo)體系采用客觀標(biāo)準(zhǔn)來測(cè)量和評(píng)估移動(dòng)流媒體業(yè)務(wù)QoE的方法，屬于移動(dòng)網(wǎng)絡(luò)服務(wù)質(zhì)量評(píng)價(jià)的技術(shù)領(lǐng)域。
背景技術(shù)：
隨著移動(dòng)通信技術(shù)的發(fā)展和移動(dòng)終端性能的提高，移動(dòng)通信網(wǎng)絡(luò)已經(jīng)能夠提供多種服務(wù)，例如語音、彩信、移動(dòng)流媒體和WAP等業(yè)務(wù)都已經(jīng)成為人們?nèi)粘Ｉ钆c工作中不可或缺的內(nèi)容。其中移動(dòng)流媒體業(yè)務(wù)的應(yīng)用越來越廣泛，已經(jīng)成為主流應(yīng)用之一。但是，在頻譜資源日趨緊張的無線網(wǎng)絡(luò)上提供流媒體業(yè)務(wù)時(shí)，用戶所體驗(yàn)到的移動(dòng)流媒體的業(yè)務(wù) 質(zhì)量不再只與網(wǎng)絡(luò)傳輸相關(guān)，而是由承載網(wǎng)絡(luò)、業(yè)務(wù)網(wǎng)絡(luò)、用戶終端等多個(gè)環(huán)節(jié)所共同決定的。然而，目前的移動(dòng)流媒體業(yè)務(wù)質(zhì)量的測(cè)評(píng)還是停留于網(wǎng)絡(luò)側(cè)端到端的服務(wù)質(zhì)量QoS(Quality of Service)的測(cè)量與管理基礎(chǔ)上，很少有從終端用戶體驗(yàn)的角度對(duì)移動(dòng)流媒體的業(yè)務(wù)品質(zhì)進(jìn)行測(cè)評(píng)。因此，盡管移動(dòng)流媒體業(yè)務(wù)有著很好的應(yīng)用前景，但是，直至今日，國(guó)內(nèi)外都未見有移動(dòng)流媒體業(yè)務(wù)實(shí)現(xiàn)用戶體驗(yàn)的實(shí)時(shí)評(píng)測(cè)的報(bào)道或論文，其主要原因就是目前還沒有一套有效、準(zhǔn)確的移動(dòng)流媒體業(yè)務(wù)質(zhì)量的客觀評(píng)價(jià)方案及其業(yè)務(wù)體驗(yàn)感知QoE的指標(biāo)體系。對(duì)于網(wǎng)絡(luò)運(yùn)營(yíng)商和服務(wù)提供商來說，要想降低成本，提高效益，從而在激烈的市場(chǎng)競(jìng)爭(zhēng)中獲取成功，必須不斷完善移動(dòng)流媒體業(yè)務(wù)的質(zhì)量和提高終端用戶的滿意度。因此，如何設(shè)計(jì)和提供一套有效、精準(zhǔn)的移動(dòng)流媒體業(yè)務(wù)質(zhì)量的客觀評(píng)價(jià)方案，對(duì)其業(yè)務(wù)性能及用戶體驗(yàn)進(jìn)行測(cè)量和評(píng)估，進(jìn)而優(yōu)化網(wǎng)絡(luò)性能，提高服務(wù)質(zhì)量，提升用戶體驗(yàn)，對(duì)于移動(dòng)通信網(wǎng)的發(fā)展具有非常重要的意義。目前，針對(duì)移動(dòng)流媒體業(yè)務(wù)需要不斷完善的自身需求，已有一些公司和文獻(xiàn)公布了不同的解決方案。下面簡(jiǎn)要介紹目前現(xiàn)有的技術(shù)和產(chǎn)品(I)華為 iSEA (intelligent Service Experience Assurance)技術(shù)方案首先建立基于用戶感知的端到端(E2E)業(yè)務(wù)品質(zhì)管理體系，并基于該體系提出了“指標(biāo)一監(jiān)測(cè)一定界一優(yōu)化”的E2E移動(dòng)業(yè)務(wù)品質(zhì)保障服務(wù)模型。該技術(shù)方案的不足之處是僅從語音業(yè)務(wù)和數(shù)據(jù)業(yè)務(wù)兩方面建立移動(dòng)業(yè)務(wù)品質(zhì)保障服務(wù)模型，并未對(duì)數(shù)據(jù)業(yè)務(wù)進(jìn)行進(jìn)一步區(qū)分和測(cè)評(píng)。(2)中國(guó)發(fā)明專利申請(qǐng)《流媒體業(yè)務(wù)質(zhì)量監(jiān)測(cè)裝置及方法》(公開號(hào)CN201010586566. 9)。該專利申請(qǐng)公開的流媒體業(yè)務(wù)質(zhì)量監(jiān)測(cè)裝置包括數(shù)個(gè)流媒體業(yè)務(wù)性能參數(shù)采集模塊，例如，基本信息采集模塊，信號(hào)強(qiáng)度監(jiān)測(cè)模塊，管理模塊，統(tǒng)計(jì)分析模塊(包括抓包單元和視頻分析單元)，其中的抓包單元用于采集空口傳輸數(shù)據(jù)，并根據(jù)空口傳輸數(shù)據(jù)獲取無線側(cè)傳輸性能指標(biāo)；視頻分析單元用于獲取播放質(zhì)量參數(shù)，該播放質(zhì)量參數(shù)包括流媒體的清晰度等。
該專利申請(qǐng)雖然具有比較齊全的流媒體業(yè)務(wù)性能采集模塊，但其不是從用戶感知體驗(yàn)出發(fā)的，沒有嚴(yán)格地剖析流媒體業(yè)務(wù)的全部過程，也并未建立一套系統(tǒng)的質(zhì)量評(píng)估方案。(3)中國(guó)發(fā)明專利申請(qǐng)《視頻電話和流媒體的用戶感知效果的測(cè)試系統(tǒng)和測(cè)試方法》(申請(qǐng)?zhí)?00910199119)。該專利申請(qǐng)的測(cè)試系統(tǒng)和測(cè)試方法應(yīng)用于TD-SCDMA/HSDPA/HSUPA/HSPA+/LTE制式下的視頻業(yè)務(wù)，系統(tǒng)組成包括TD_SCDMA制式測(cè)試終端，VT視頻測(cè)試服務(wù)器，結(jié)果分析服務(wù)器，流媒體測(cè)試服務(wù)器，中央數(shù)據(jù)庫(kù)，短信應(yīng)用服務(wù)器，在線升級(jí)服務(wù)器，Web服務(wù)器和應(yīng)用邏輯服務(wù)器，其中測(cè)試終端、中央數(shù)據(jù)庫(kù)和各服務(wù)器通過應(yīng)用邏輯服務(wù)器交互數(shù)據(jù)。該專利申請(qǐng)的系統(tǒng)構(gòu)成部件過多，操作復(fù)雜，實(shí)用性不好。
(4)中國(guó)發(fā)明專利申請(qǐng)《3G網(wǎng)絡(luò)承載流媒體業(yè)務(wù)性能評(píng)估系統(tǒng)和方法》(申請(qǐng)?zhí)?00910249744)。該專利申請(qǐng)的系統(tǒng)包括流媒體發(fā)生裝置和流媒體接收裝置。流媒體業(yè)務(wù)發(fā)生裝置接入在核心網(wǎng)分組域中，用于發(fā)送一路或多路流媒體。流媒體接收裝置是在空口接收流媒體發(fā)生裝置發(fā)送的流媒體，根據(jù)接收的流媒體來獲得MDI指標(biāo)以評(píng)估網(wǎng)絡(luò)承載流媒體業(yè)務(wù)的性能。該專利申請(qǐng)僅根據(jù)3G網(wǎng)絡(luò)的無線傳輸特性，評(píng)估3G網(wǎng)絡(luò)中點(diǎn)播流媒體業(yè)務(wù)的主觀性能和客觀指標(biāo)，未從用戶感知體驗(yàn)角度為3G網(wǎng)絡(luò)質(zhì)量對(duì)承載流媒體質(zhì)量的影響情況進(jìn)行定量分析?？傊?，現(xiàn)有技術(shù)的多種移動(dòng)流媒體業(yè)務(wù)質(zhì)量的評(píng)估或監(jiān)測(cè)方案，都未做到全面而有效的測(cè)量和評(píng)估移動(dòng)流媒體業(yè)務(wù)，也沒有真正模擬用戶使用移動(dòng)流媒體業(yè)務(wù)的全部過程，不能客觀地反映用戶對(duì)移動(dòng)流媒體業(yè)務(wù)全過程的體驗(yàn)。。

發(fā)明內(nèi)容
有鑒于此，本發(fā)明的目的是提供一種模擬用戶行為的移動(dòng)流媒體業(yè)務(wù)用戶感知體驗(yàn)Q0E的測(cè)評(píng)方法，本發(fā)明是客觀地模擬用戶使用流媒體業(yè)務(wù)的感知體驗(yàn)其服務(wù)質(zhì)量的技術(shù)方案，它是針對(duì)目前出現(xiàn)的降低客戶投訴率、提升用戶體驗(yàn)的需求，在充分考慮現(xiàn)有網(wǎng)絡(luò)可實(shí)施的技術(shù)基礎(chǔ)的前提下，設(shè)計(jì)和提供的一種客觀地綜合測(cè)量和評(píng)估移動(dòng)流媒體業(yè)務(wù)的用戶體驗(yàn)感知的方案。為了達(dá)到上述發(fā)明目的，本發(fā)明提供了一種模擬用戶行為的移動(dòng)流媒體業(yè)務(wù)用戶感知體驗(yàn)QoE的測(cè)評(píng)方法，其特征在于先設(shè)置一套移動(dòng)流媒體業(yè)務(wù)QoE測(cè)評(píng)指標(biāo)體系，該測(cè)評(píng)指標(biāo)體系把移動(dòng)流媒體業(yè)務(wù)的用戶感知體驗(yàn)分成業(yè)務(wù)接入，業(yè)務(wù)保持和業(yè)務(wù)完整的三方面體驗(yàn)參數(shù)；然后，利用測(cè)試終端模擬用戶使用移動(dòng)流媒體業(yè)務(wù)的整個(gè)過程，分別采集與計(jì)算移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI(Key Performance Indicator),進(jìn)而計(jì)算其相應(yīng)的移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵質(zhì)量指標(biāo)KQI (Key Quality Indicator),以及利用心理模型對(duì)KQI進(jìn)行綜合運(yùn)算，從而獲得相應(yīng)的移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵體驗(yàn)指標(biāo)KEI (Key ExperienceIndicator),最后對(duì)這些KEI指標(biāo)進(jìn)行綜合分析，獲得等效于國(guó)際標(biāo)準(zhǔn)平均意見分值MOS(Mean Opinion Score)的五分制流媒體業(yè)務(wù)QoE值。所述移動(dòng)流媒體業(yè)務(wù)QoE測(cè)評(píng)指標(biāo)體系包括業(yè)務(wù)接入、業(yè)務(wù)保持和業(yè)務(wù)完整三方面性能指標(biāo)參數(shù)，其中業(yè)務(wù)接入性能參數(shù)設(shè)有2項(xiàng)取決于接入網(wǎng)絡(luò)時(shí)長(zhǎng)的接入時(shí)延、取決于PDP激活結(jié)束或認(rèn)證完成或集客專線IP地址獲取三種狀態(tài)之一的接通狀態(tài)；業(yè)務(wù)保持性能參數(shù)設(shè)有8項(xiàng)取決于RTSP保持狀態(tài)的視頻流狀態(tài)，取決于承載網(wǎng)絡(luò)狀態(tài)的在線狀態(tài)，取決于平均傳輸速率的平均速率，取決于速率標(biāo)準(zhǔn)差的速率穩(wěn)定度，取決于信號(hào)電平標(biāo)準(zhǔn)差的信號(hào)穩(wěn)定度，取決于接入RTSP時(shí)延的初始緩沖時(shí)延，取決于超流控緩沖累計(jì)時(shí)長(zhǎng)的視頻等待累計(jì)時(shí)長(zhǎng)，以及取決于超流控緩沖次數(shù)的視頻等待次數(shù)；業(yè)務(wù)完整性能參數(shù)設(shè)有I項(xiàng)；取決于視頻評(píng)價(jià)MOS值的視頻質(zhì)量。所述方法包括下述步驟( I)測(cè)試終端采集移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI :測(cè)試終端從媒體服務(wù)器上的媒體資源集中隨機(jī)選擇讀取一個(gè)可播放的統(tǒng)一資源定位符URL (Uniform ResourceLocator)，模擬用戶的視頻點(diǎn)播行為并收集和保存KPI ；(2)根據(jù)移動(dòng)流媒體業(yè)務(wù)QoE測(cè)評(píng)指標(biāo)體系中的性能指標(biāo)參數(shù)，利用采集到的關(guān)鍵性能指標(biāo)KPI逐步計(jì)算其關(guān)鍵質(zhì)量指標(biāo)KQI和關(guān)鍵體驗(yàn)指標(biāo)KEI,并最終得到測(cè)試終端豐旲擬用戶本次使用移動(dòng)流媒體業(yè)務(wù)的QoE值； (3)返回多次重復(fù)執(zhí)行步驟(I)和(2);并基于該多次測(cè)試結(jié)果數(shù)據(jù)，統(tǒng)計(jì)設(shè)定時(shí)間和/或設(shè)定地點(diǎn)的移動(dòng)流媒體業(yè)務(wù)的用戶體驗(yàn)質(zhì)量情況。所述步驟(I)中，測(cè)試終端采集到的移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI包括下述各個(gè)參數(shù)接入網(wǎng)絡(luò)時(shí)長(zhǎng)為網(wǎng)絡(luò)接入完成時(shí)刻與其接入開始時(shí)刻的差值，所述網(wǎng)絡(luò)包括通用分組無線業(yè)務(wù)GPRS (General Packet Radio Service)網(wǎng)絡(luò)、無線局域網(wǎng)絡(luò)WLAN(Wireless Local Area Networks)和集客專線網(wǎng)絡(luò),單位是秒(s);分組數(shù)據(jù)協(xié)議F1DP (Packet Data Protocol)激活結(jié)束狀態(tài)所述激活是終端傳送數(shù)據(jù)前向系統(tǒng)服務(wù)器申請(qǐng)IP地址資源的過程；對(duì)于GPRS網(wǎng)絡(luò)，若激活成功，該狀態(tài)數(shù)值為1，否則為0 ;認(rèn)證完成狀態(tài)所述認(rèn)證是終端傳送數(shù)據(jù)前通過web頁面連接計(jì)費(fèi)服務(wù)器的過程，對(duì)于WLAN網(wǎng)絡(luò)，若認(rèn)證成功，該狀態(tài)數(shù)值為1，否則為0 ;集客專線IP地址獲取狀態(tài)為終端傳送數(shù)據(jù)前向系統(tǒng)服務(wù)器申請(qǐng)IP地址資源的過程，對(duì)于集客專線網(wǎng)絡(luò)，若IP地址獲取成功，該狀態(tài)數(shù)值為1，否則為0 ;信號(hào)標(biāo)準(zhǔn)差為測(cè)試時(shí)間段內(nèi)信號(hào)電平的均方差；單位是分貝毫瓦(dBm)；接入實(shí)時(shí)流傳輸協(xié)議RTSP (Real Time Streaming Protocol)時(shí)延為接入RTSP完成時(shí)刻與接入RTSP開始時(shí)刻的差值，單位是秒(s)；RTSP保持狀態(tài)接入RTSP狀態(tài)的數(shù)值為1，否則為0 ;承載網(wǎng)絡(luò)狀態(tài)網(wǎng)絡(luò)處于在線保持狀態(tài)時(shí)，該狀態(tài)數(shù)值為1，處于網(wǎng)絡(luò)掉線時(shí)，則該狀態(tài)數(shù)值為0 ;平均傳輸速率為測(cè)試時(shí)間段內(nèi)傳輸速率的平均值，即文件字長(zhǎng)與傳輸時(shí)長(zhǎng)的比值，單位是kb/秒；速率標(biāo)準(zhǔn)差為測(cè)試時(shí)間段內(nèi)速率的均方差；單位是kb/秒超流控緩沖累計(jì)時(shí)長(zhǎng)為超過設(shè)定閾值的多個(gè)單次重緩沖所需耗用的時(shí)長(zhǎng)的累加和，單位是秒(s);超流控緩沖次數(shù)為每次重緩沖所需耗用的時(shí)長(zhǎng)超過設(shè)定閾值的重緩沖的總次數(shù)；視頻評(píng)價(jià)MOS值為經(jīng)過網(wǎng)絡(luò)參數(shù)修正后的視頻客觀評(píng)價(jià)值，即采用下述基于小波變換的無參考視頻質(zhì)量評(píng)價(jià)方法得到的數(shù)值先依據(jù)基于人眼興趣加權(quán)的運(yùn)動(dòng)劇烈程度初步選取關(guān)鍵幀，再通過相關(guān)性分析將初選的關(guān)鍵幀分為場(chǎng)景切換型和非場(chǎng)景切換型，然后對(duì)非場(chǎng)景切換型關(guān)鍵幀評(píng)價(jià)圖像質(zhì)量，并根據(jù)該評(píng)價(jià)結(jié)果將非場(chǎng)景切換型關(guān)鍵幀細(xì)分為內(nèi)容變化型和質(zhì)量變化型；最后利用質(zhì)量變化型關(guān)鍵幀的持續(xù)時(shí)間因子和惡化頻率因子對(duì)其中每個(gè)單幀的圖像質(zhì)量進(jìn)行加權(quán)求和，計(jì)算得到整個(gè)視頻序列的質(zhì)量評(píng)價(jià)結(jié)果。所述步驟(2)包括下列操作內(nèi)容(21)利用測(cè)試終端采集到的移動(dòng)流媒體業(yè)務(wù)KPI分別計(jì)算下述各個(gè)KQI 接入時(shí)延，為接入網(wǎng)絡(luò)時(shí)長(zhǎng)；接通狀態(tài)，為PDP激活結(jié)束、認(rèn)證完成或集客專線IP地址獲取的三種狀態(tài)中的一種狀態(tài)；視頻流狀態(tài)，為RTSP保持狀態(tài)；在線狀態(tài)，為承載網(wǎng)絡(luò)狀態(tài)；平均速率,為平均傳輸速率；信號(hào)穩(wěn)定度，為信號(hào)電平的標(biāo)準(zhǔn)差系數(shù)，用于表示單位信號(hào)電平均值的偏離度；其
、1姓八n信號(hào)電平標(biāo)準(zhǔn)差.
計(jì)算公式為穩(wěn)疋度=信號(hào)電平均值，速率穩(wěn)定度，為傳輸速率的標(biāo)準(zhǔn)差系數(shù)，用于表示單位平均傳輸速率的偏離度；其臟式為獅定度初始緩沖時(shí)延，為視頻播放開始時(shí)刻與視頻播放請(qǐng)求時(shí)刻之差值，其數(shù)值與接入RTSP時(shí)延等同；視頻等待累計(jì)時(shí)長(zhǎng)，為超流控緩沖累計(jì)時(shí)長(zhǎng)，即超過設(shè)定閾值的多個(gè)單次超流控緩沖時(shí)長(zhǎng)的累加和；視頻等待次數(shù)，為超流控緩沖次數(shù)，即單次超流控緩沖時(shí)長(zhǎng)超過設(shè)定閾值的重緩沖的總次數(shù)；視頻質(zhì)量，為視頻評(píng)價(jià)MOS值，即經(jīng)過網(wǎng)絡(luò)參數(shù)修正的視頻客觀評(píng)分值；(22)先將KQI指標(biāo)分為兩類實(shí)際數(shù)值越大、網(wǎng)絡(luò)性能越好的正向指標(biāo)和實(shí)際數(shù)值越小、網(wǎng)絡(luò)性能越好的反向指標(biāo)，其中正向指標(biāo)包括接通狀態(tài)、視頻流狀態(tài)、在線狀態(tài)、平均速率和視頻質(zhì)量，反向指標(biāo)包括接入時(shí)延、速率穩(wěn)定度、信號(hào)穩(wěn)定度、初始緩沖時(shí)延、視頻等待累計(jì)時(shí)長(zhǎng)和視頻等待次數(shù)；再將每項(xiàng)KQI指標(biāo)與其期望值相比較，并按照滿意度映射函數(shù)計(jì)算每個(gè)KQI的滿意度值KQImqs,即等效于MOS
區(qū)間的分值；(23)利用每個(gè)KQI的滿意度值KQImqs和層次分析法AHP (Analytic HierarchyProcess),按照公式KEIi= E w 0KQIltlosij 0計(jì)算其關(guān)鍵體驗(yàn)指標(biāo)KEI ;式中，KEIi是由下標(biāo)i區(qū)分的接入性、保持性和完整性的關(guān)鍵體驗(yàn)指標(biāo)；系數(shù)是由下標(biāo)3區(qū)分的各項(xiàng)關(guān)鍵體驗(yàn)指標(biāo)KEI中的各項(xiàng)關(guān)鍵質(zhì)量指標(biāo)KQI的權(quán)重，《 e是由AHP得到的，且滿足
權(quán)利要求
1.一種模擬用戶行為的移動(dòng)流媒體業(yè)務(wù)用戶感知體驗(yàn)QoE的測(cè)評(píng)方法，其特征在于先設(shè)置一套移動(dòng)流媒體業(yè)務(wù)QoE測(cè)評(píng)指標(biāo)體系，該測(cè)評(píng)指標(biāo)體系把移動(dòng)流媒體業(yè)務(wù)的用戶感知體驗(yàn)分成業(yè)務(wù)接入，業(yè)務(wù)保持和業(yè)務(wù)完整的三方面體驗(yàn)參數(shù)；然后，利用測(cè)試終端模擬用戶使用移動(dòng)流媒體業(yè)務(wù)的整個(gè)過程，分別采集與計(jì)算移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI (Key Performance Indicator),進(jìn)而計(jì)算其相應(yīng)的移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵質(zhì)量指標(biāo)KQI (Key Quality Indicator),以及利用心理模型對(duì)KQI進(jìn)行綜合運(yùn)算,從而獲得相應(yīng)的移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵體驗(yàn)指標(biāo)KEI (Key Experience Indicator),最后對(duì)這些KEI指標(biāo)進(jìn)行綜合分析，獲得等效于國(guó)際標(biāo)準(zhǔn)平均意見分值MOS (Mean Opinion Score)的五分制流媒體業(yè)務(wù)QqE值。
2.根據(jù)權(quán)利要求I所述的評(píng)測(cè)方法，其特征在于所述移動(dòng)流媒體業(yè)務(wù)QoE測(cè)評(píng)指標(biāo)體系包括業(yè)務(wù)接入、業(yè)務(wù)保持和業(yè)務(wù)完整三方面性能指標(biāo)參數(shù)，其中業(yè)務(wù)接入性能參數(shù)設(shè)有2項(xiàng)取決于接入網(wǎng)絡(luò)時(shí)長(zhǎng)的接入時(shí)延、取決于PDP激活結(jié)束或認(rèn)證完成或集客專線IP地址獲取三種狀態(tài)之一的接通狀態(tài)；業(yè)務(wù)保持性能參數(shù)設(shè)有8項(xiàng)取決于RTSP保持狀態(tài)的視頻流狀態(tài)，取決于承載網(wǎng)絡(luò)狀態(tài)的在線狀態(tài)，取決于平均傳輸速率的平均速率，取決于速率標(biāo)準(zhǔn)差的速率穩(wěn)定度，取決于彳目號(hào)電平標(biāo)準(zhǔn)差的 目號(hào)穩(wěn)定度，取決于接入RTSP時(shí)延的初始緩沖時(shí)延，取決于超流控緩沖累計(jì)時(shí)長(zhǎng)的視頻等待累計(jì)時(shí)長(zhǎng)，以及取決于超流控緩沖次數(shù)的視頻等待次數(shù)；業(yè)務(wù)完整性能參數(shù)設(shè)有I項(xiàng)；取決于視頻評(píng)價(jià)MOS值的視頻質(zhì)量。
3.根據(jù)權(quán)利要求I所述的方法，其特征在于所述方法包括下述步驟 (1)測(cè)試終端采集移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI:測(cè)試終端從媒體服務(wù)器上的媒體資源集中隨機(jī)選擇讀取一個(gè)可播放的統(tǒng)一資源定位符URL，模擬用戶的視頻點(diǎn)播行為并收集和保存KPI ； (2)根據(jù)移動(dòng)流媒體業(yè)務(wù)QoE測(cè)評(píng)指標(biāo)體系中的性能指標(biāo)參數(shù)，利用采集到的關(guān)鍵性能指標(biāo)KPI逐步計(jì)算其關(guān)鍵質(zhì)量指標(biāo)KQI和關(guān)鍵體驗(yàn)指標(biāo)KEI，并最終得到測(cè)試終端模擬用戶本次使用移動(dòng)流媒體業(yè)務(wù)的QoE值； (3)返回多次重復(fù)執(zhí)行步驟(I)和(2);并基于該多次測(cè)試結(jié)果數(shù)據(jù)，統(tǒng)計(jì)設(shè)定時(shí)間和/或設(shè)定地點(diǎn)的移動(dòng)流媒體業(yè)務(wù)的用戶體驗(yàn)質(zhì)量情況。
4.根據(jù)權(quán)利要求3所述的方法，其特征在于所述步驟(I)中，測(cè)試終端采集到的移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI包括下述各個(gè)參數(shù) 接入網(wǎng)絡(luò)時(shí)長(zhǎng)為網(wǎng)絡(luò)接入完成時(shí)刻與其接入開始時(shí)刻的差值，所述網(wǎng)絡(luò)包括通用分組無線業(yè)務(wù)GPRS網(wǎng)絡(luò)、無線局域網(wǎng)絡(luò)WLAN和集客專線網(wǎng)絡(luò)，單位是秒(S)； 分組數(shù)據(jù)協(xié)議PDP激活結(jié)束狀態(tài)所述激活是終端傳送數(shù)據(jù)前向系統(tǒng)服務(wù)器申請(qǐng)IP地址資源的過程；對(duì)于GPRS網(wǎng)絡(luò)，若激活成功，該狀態(tài)數(shù)值為1，否則為O ; 認(rèn)證完成狀態(tài)所述認(rèn)證是終端傳送數(shù)據(jù)前通過web頁面連接計(jì)費(fèi)服務(wù)器的過程，對(duì)于WLAN網(wǎng)絡(luò)，若認(rèn)證成功，該狀態(tài)數(shù)值為1，否則為O ; 集客專線IP地址獲取狀態(tài)為終端傳送數(shù)據(jù)前向系統(tǒng)服務(wù)器申請(qǐng)IP地址資源的過程，對(duì)于集客專線網(wǎng)絡(luò)，若IP地址獲取成功，該狀態(tài)數(shù)值為1，否則為O ; 信號(hào)標(biāo)準(zhǔn)差為測(cè)試時(shí)間段內(nèi)信號(hào)電平的均方差；單位是分貝毫瓦(dBm)； 接入實(shí)時(shí)流傳輸協(xié)議RTSP時(shí)延為接入RTSP完成時(shí)刻與接入RTSP開始時(shí)刻的差值，單位是秒(s)；RTSP保持狀態(tài)接入RTSP狀態(tài)的數(shù)值為1，否則為O ; 承載網(wǎng)絡(luò)狀態(tài)網(wǎng)絡(luò)處于在線保持狀態(tài)時(shí)，該狀態(tài)數(shù)值為1，處于網(wǎng)絡(luò)掉線時(shí)，則該狀態(tài)數(shù)值為O ; 平均傳輸速率為測(cè)試時(shí)間段內(nèi)傳輸速率的平均值，即文件字長(zhǎng)與傳輸時(shí)長(zhǎng)的比值，單位是kb/秒； 速率標(biāo)準(zhǔn)差為測(cè)試時(shí)間段內(nèi)速率的均方差；單位是kb/秒 超流控緩沖累計(jì)時(shí)長(zhǎng)為超過設(shè)定閾值的多個(gè)單次重緩沖所需耗用的時(shí)長(zhǎng)的累加和，單位是秒(S)； 超流控緩沖次數(shù)為每次重緩沖所需耗用的時(shí)長(zhǎng)超過設(shè)定閾值的重緩沖的總次數(shù)； 視頻評(píng)價(jià)MOS值為經(jīng)過網(wǎng)絡(luò)參數(shù)修正后的視頻客觀評(píng)價(jià)值，即采用下述基于小波變換的無參考視頻質(zhì)量評(píng)價(jià)方法得到的數(shù)值先依據(jù)基于人眼興趣加權(quán)的運(yùn)動(dòng)劇烈程度初步選取關(guān)鍵幀，再通過相關(guān)性分析將初選的關(guān)鍵幀分為場(chǎng)景切換型和非場(chǎng)景切換型，然后對(duì)非場(chǎng)景切換型關(guān)鍵幀評(píng)價(jià)圖像質(zhì)量，并根據(jù)該評(píng)價(jià)結(jié)果將非場(chǎng)景切換型關(guān)鍵幀細(xì)分為內(nèi)容變化型和質(zhì)量變化型；最后利用質(zhì)量變化型關(guān)鍵幀的持續(xù)時(shí)間因子和惡化頻率因子對(duì)其中每個(gè)單幀的圖像質(zhì)量進(jìn)行加權(quán)求和，計(jì)算得到整個(gè)視頻序列的質(zhì)量評(píng)價(jià)結(jié)果。
5.根據(jù)權(quán)利要求3所述的方法，其特征在于所述步驟(2)包括下列操作內(nèi)容 (21)利用測(cè)試終端采集到的移動(dòng)流媒體業(yè)務(wù)KPI分別計(jì)算下述各個(gè)KQI 接入時(shí)延，為接入網(wǎng)絡(luò)時(shí)長(zhǎng)； 接通狀態(tài)，為PDP激活結(jié)束、認(rèn)證完成或集客專線IP地址獲取的三種狀態(tài)中的一種狀態(tài)； 視頻流狀態(tài)，為RTSP保持狀態(tài)； 在線狀態(tài)，為承載網(wǎng)絡(luò)狀態(tài)； 平均速率，為平均傳輸速率； 信號(hào)穩(wěn)定度，為信號(hào)電平的標(biāo)準(zhǔn)差系數(shù)，用于表示單位信號(hào)電平均值的偏離度；其計(jì)算八卡 ^!蘆中信號(hào)電平標(biāo)準(zhǔn)差.公式為穩(wěn)疋度_信號(hào)電平均值， 速率穩(wěn)定度，為傳輸速率的標(biāo)準(zhǔn)差系數(shù)，用于表示單位平均傳輸速率的偏離度；其計(jì)算公式為 速率穩(wěn)定度=速率標(biāo)準(zhǔn)差；Λ、刀.平均傳輸速率 初始緩沖時(shí)延，為視頻播放開始時(shí)刻與視頻播放請(qǐng)求時(shí)刻之差值，其數(shù)值與接入RTSP時(shí)延等同； 視頻等待累計(jì)時(shí)長(zhǎng)，為超流控緩沖累計(jì)時(shí)長(zhǎng)，即超過設(shè)定閾值的多個(gè)單次超流控緩沖時(shí)長(zhǎng)的累加和； 視頻等待次數(shù)，為超流控緩沖次數(shù)，即單次超流控緩沖時(shí)長(zhǎng)超過設(shè)定閾值的重緩沖的總次數(shù)； 視頻質(zhì)量，為視頻評(píng)價(jià)MOS值，即經(jīng)過網(wǎng)絡(luò)參數(shù)修正的視頻客觀評(píng)分值； (22)先將KQI指標(biāo)分為兩類實(shí)際數(shù)值越大、網(wǎng)絡(luò)性能越好的正向指標(biāo)和實(shí)際值越小、網(wǎng)絡(luò)性能越好的反向指標(biāo)，其中正向指標(biāo)包括接通狀態(tài)、視頻流狀態(tài)、在線狀態(tài)、平均速率和視頻質(zhì)量，反向指標(biāo)包括接入時(shí)延、速率穩(wěn)定度、信號(hào)穩(wěn)定度、初始緩沖時(shí)延、視頻等待累計(jì)時(shí)長(zhǎng)和視頻等待次數(shù)； 再將每項(xiàng)KQI指標(biāo)與其期望值相比較，并按照滿意度映射函數(shù)計(jì)算每個(gè)KQI的滿意度值KQImos,即等效于MOS [O, 5]區(qū)間的分值； (23)利用每個(gè)KQI的滿意度值KQIsros和層次分析法AHP，按照公式KEIi=Σ ω eKQIsrosi,0計(jì)算其關(guān)鍵體驗(yàn)指標(biāo)KEI ;式中，KEIi是由下標(biāo)i區(qū)分的接入性、保持性和完整性的關(guān)鍵體驗(yàn)指標(biāo)；系數(shù)ω g是由下標(biāo)β區(qū)分的各項(xiàng)關(guān)鍵體驗(yàn)指標(biāo)KEI中的各項(xiàng)關(guān)鍵質(zhì)量指標(biāo)KQI的權(quán)重，ω0是由AHP得到的，且滿足Σ ω0=1 ；ΚΕΙ的取值區(qū)間為
； (24)按照下述公式計(jì)算測(cè)試終端模擬用戶每次移動(dòng)流媒體業(yè)務(wù)的QoE值QoE= Σ (OiKEIi=CO接入性KEI接入性+ ω保持性KEI保持性+ ω完整性KEI完整性;該步驟操作內(nèi)各與步驟(23)相同，即利用AHP方法先構(gòu)造各KEI關(guān)系判斷矩陣，再計(jì)算該判斷矩陣的最大特征值與其對(duì)應(yīng)的特征向量，并對(duì)該特征向量進(jìn)行歸一化處理，歸一化處理后的向量的每個(gè)元素就是各KEI對(duì)應(yīng)的權(quán)重Oi，最后進(jìn)行一致性檢驗(yàn)；但要說明的是當(dāng)上述三個(gè)KEI中任意一個(gè)數(shù)值為O時(shí)，則其對(duì)應(yīng)的QoE即為O。
6.根據(jù)權(quán)利要求5所述的方法，其特征在于所述步驟(22)中，所述期望值是由評(píng)估者根據(jù)人的主觀體驗(yàn)和需求，針對(duì)不同類型的應(yīng)用進(jìn)行差異化設(shè)置的數(shù)值；所述滿意度映射函數(shù)是根據(jù)人的主觀體驗(yàn)?zāi)Ｐ?，即取決于各項(xiàng)KQI實(shí)測(cè)值與其期望值之比值而確定的下述兩種S型分段曲線的函數(shù)式 正向指標(biāo)滿意度映射函數(shù)式··KQ1 Atos =' -~kQi-A, e (0,100%);或者 反向指標(biāo)滿意度映射函數(shù)式·Μ』Ι'抓=-e(100%，200%);式中，系
全文摘要
一種模擬用戶行為的移動(dòng)流媒體業(yè)務(wù)用戶感知體驗(yàn)QoE的測(cè)評(píng)方法先設(shè)置一套把移動(dòng)流媒體業(yè)務(wù)的用戶感知體驗(yàn)分成業(yè)務(wù)接入，業(yè)務(wù)保持和業(yè)務(wù)完整三方面參數(shù)的移動(dòng)流媒體業(yè)務(wù)QoE測(cè)評(píng)指標(biāo)體系，再利用測(cè)試終端模擬用戶使用移動(dòng)流媒體業(yè)務(wù)的整個(gè)過程，分別采集與計(jì)算移動(dòng)流媒體業(yè)務(wù)的關(guān)鍵性能指標(biāo)KPI，進(jìn)而計(jì)算其相應(yīng)業(yè)務(wù)的關(guān)鍵質(zhì)量指標(biāo)KQI，以及利用心理模型對(duì)KQI進(jìn)行綜合運(yùn)算，獲得相應(yīng)業(yè)務(wù)的關(guān)鍵體驗(yàn)指標(biāo)KEI，最后對(duì)這些KEI指標(biāo)進(jìn)行綜合分析，獲得等效于國(guó)際標(biāo)準(zhǔn)平均意見分值MOS的五分制流媒體業(yè)務(wù)QoE值。本發(fā)明方法的測(cè)評(píng)參數(shù)標(biāo)準(zhǔn)客觀、實(shí)用、操作步驟簡(jiǎn)單，計(jì)算復(fù)雜度低和易于集成，能夠模擬移動(dòng)流媒體業(yè)務(wù)用戶得到相對(duì)客觀、公正的用戶體驗(yàn)感知質(zhì)量。
文檔編號(hào)H04W24/06GK102685790SQ20121015992
公開日2012年9月19日 申請(qǐng)日期2012年5月22日 優(yōu)先權(quán)日2012年5月22日
發(fā)明者亓玉嬌, 劉勇, 葉艷柯, 周小毛, 孟欣欣, 徐靜濤, 李湘平, 杜海清, 王永峰, 胡文, 許克輝 申請(qǐng)人:北京東方文駿軟件科技有限責(zé)任公司, 北京郵電大學(xué)