相關(guān)申請的交叉引用

本發(fā)明要求享有序列號為14/570,932、于2014年12月15日遞交的美國實(shí)用專利申請的優(yōu)先權(quán)。具有序列號14/570,932的美國實(shí)用專利申請的全部內(nèi)容通過引用全部并入本文。

背景技術(shù)：

除了其他方面，蜂窩技術(shù)和現(xiàn)代智能電話的組合已經(jīng)創(chuàng)造出數(shù)據(jù)量的激增，該數(shù)據(jù)無線地提供給用戶。各種應(yīng)用包括，例如you語音通話和發(fā)短信都需要數(shù)字寬帶。這種數(shù)據(jù)可通過各種蜂窩網(wǎng)絡(luò)(例如2g、3g、4g和4glte)提供并且也可通過各種無線網(wǎng)絡(luò)(例如802.1lb/g/n)提供或擴(kuò)充。

通常，用戶蜂窩體驗質(zhì)量利用服務(wù)質(zhì)量(qos)度量來測量。這些傾向于客觀、技術(shù)的網(wǎng)絡(luò)測量并且可包括，例如但不限制于，信號強(qiáng)度、失誤率、寬帶、吞吐量、傳輸延遲、可用性和抖動。并且，雖然這些度量可準(zhǔn)確地測量網(wǎng)絡(luò)的客觀性能，但是，網(wǎng)絡(luò)性能不一定轉(zhuǎn)換成針對用戶的體驗質(zhì)量(qoe)。

如果，例如用戶在具有多個蜂窩接入點(diǎn)的體育場參加足球比賽，qos度量可指示用戶具有優(yōu)良的信號并且系統(tǒng)具有龐大吞吐量(因為具有多個接入點(diǎn))。但是，如果體育場中大量的人同時使用他們的電話，則無論如何用戶還是會體驗掉話、較低的下載速度和/或來自各種應(yīng)用的遲緩響應(yīng)。因此，盡管qos度量指示系統(tǒng)標(biāo)稱地運(yùn)行，但是許多用戶可具有較低的qoe。其結(jié)果是，qos度量不會也不能解決一些重要問題。

附圖說明

參考附圖給出了詳細(xì)的描述。在附圖中，參考數(shù)字的最左邊數(shù)字識別參考數(shù)字第一次出現(xiàn)的附圖。在不同附圖使用相同參考數(shù)字指示相似或相同項目或特征。

圖1是常規(guī)的蜂窩/無線網(wǎng)絡(luò)的示意圖。

圖2是常規(guī)的蜂窩覆蓋地圖的示意圖。

圖3a是根據(jù)本公開一些示例的蜂窩網(wǎng)絡(luò)性能地圖的示意圖。

圖3b是根據(jù)本公開一些示例的、用于提供用戶蜂窩性能和服務(wù)推薦的圖形用戶界面。

圖3c是根據(jù)本公開一些示例的、用于提供用戶蜂窩性能和服務(wù)推薦的另一個圖形用戶界面。

圖4a是根據(jù)本公開一些示例的、用于提供用戶設(shè)備和網(wǎng)絡(luò)性能的圖形用戶界面。

圖4b是根據(jù)本公開的一些示例的、用于提供用戶應(yīng)用的性能的圖形用戶界面。

圖5是根據(jù)本公開的一些示例的、用于收集和編譯與整體蜂窩體驗質(zhì)量(qoe)相關(guān)的系統(tǒng)的系統(tǒng)示圖。

圖6是根據(jù)本公開的一些示例的用戶設(shè)備(ue)性能應(yīng)用的系統(tǒng)示圖。

圖7a和7b是描繪根據(jù)本公開的一些示例的、用于定位和報告網(wǎng)絡(luò)、用戶設(shè)備(ue)和應(yīng)用故障的方法的流程圖。

具體實(shí)施方式

本公開的示例一般地涉及蜂窩用戶體驗質(zhì)量(qoe)，并且具體地，涉及利用多個度量測量、跟蹤和改進(jìn)用戶qoe的系統(tǒng)和方法。在一些示例中，系統(tǒng)可包括用戶設(shè)備(ue)上的應(yīng)用以測量用戶側(cè)網(wǎng)絡(luò)響應(yīng)時間，以及處理器和存儲器使用，以例如使系統(tǒng)查明較差的qoe的原因。在一些示例中，系統(tǒng)可將qoe數(shù)據(jù)和服務(wù)質(zhì)量(qos)數(shù)據(jù)的元素組合以識別問題并且提供解決方案。系統(tǒng)也可包括一個或更多個用戶界面，其向用戶提供對當(dāng)前qoe狀況的指示。

為了簡化和闡明說明，本公開在本文中作為用于分析、跟蹤和修復(fù)涉及用戶蜂窩qoe的問題的系統(tǒng)和方法而描述。但是，本領(lǐng)域技術(shù)人員將意識到，本公開并非是如此限制性的。系統(tǒng)，例如但不限制于，也可和其他類型的網(wǎng)絡(luò)一起使用，包括其他無線和有線網(wǎng)絡(luò)。另外，下面提供的公開涉及當(dāng)前的蜂窩技術(shù)(例如2g、3g、4g和4glte(長期演進(jìn)))，但同樣可應(yīng)用于其他網(wǎng)絡(luò)技術(shù)，包括本公開之后開發(fā)的技術(shù)。

以下作為組成本公開不同元素而描述的度量、方法和步驟旨在闡釋性的和非限制性的。執(zhí)行本文此處所描述的系統(tǒng)的相同或相似功能的許多合適的數(shù)據(jù)集、應(yīng)用和網(wǎng)絡(luò)旨在包括與本公開的范圍之內(nèi)。這種本文此處沒有描述的其他系統(tǒng)和方法可包括但不限于本公開開發(fā)之后所開發(fā)的系統(tǒng)、方法和技術(shù)。

一般而言，qos是對諸如但不限制于服務(wù)器、路由器或網(wǎng)絡(luò)流量(例如ip分組、傳送流等)的特定基礎(chǔ)設(shè)施組件的監(jiān)視。qos度量通常為設(shè)備或以傳輸為導(dǎo)向的，并且由此測量包括例如cpu、存儲器使用、分組流失、延遲或抖動的客觀因素。

不幸的是，qos不能評估終端用戶所見和所感知的網(wǎng)絡(luò)質(zhì)量。因為現(xiàn)行的基礎(chǔ)設(shè)施設(shè)計為魯棒的和過剩的-具有備份服務(wù)、可選的網(wǎng)絡(luò)路由和失誤矯正-網(wǎng)絡(luò)或設(shè)備層上的問題不一定會導(dǎo)致終端用戶的服務(wù)層問題。由于路由器故障所觸發(fā)的警告可能不會為用戶預(yù)示服務(wù)中斷，特別是當(dāng)流量被正確地重新路由時，但是可能導(dǎo)致用戶延遲。

另一方面，qoe性能指示符是以用戶為中心的。它們包括諸如，例如但不限制于，下載網(wǎng)頁、訪問應(yīng)用、打電話、改變tv頻道、登陸交互式服務(wù)的時間，以及測量視頻&音頻質(zhì)量。這會促進(jìn)猜測從影響評估剔除并且為，例如驅(qū)動操作、優(yōu)先投資(例如在基礎(chǔ)設(shè)施內(nèi))和ue選擇提供真實(shí)信息。

評估傳送到用戶的質(zhì)量的一種方法是供應(yīng)商像用戶一樣連接到服務(wù)。不幸的是，歸因于不同類型用戶、ue、位置和所涉及的基礎(chǔ)設(shè)施的數(shù)量，收集足夠數(shù)據(jù)以使其成為有意義的演練很困難。利用具有多種要素的途徑的另一個解決方案可在ue上包括應(yīng)用，以監(jiān)控用戶側(cè)體驗，該用戶側(cè)體驗與數(shù)據(jù)相結(jié)合，該數(shù)據(jù)來自例如因特網(wǎng)服務(wù)供應(yīng)商(isp)、內(nèi)容供應(yīng)商(例如facebook、youtube等)，以及甚至來自于用戶直接輸入的數(shù)據(jù)。

當(dāng)然，用于訂閱者水平監(jiān)控的qoe和用于設(shè)備排查和根本原因分析的qos二者可被協(xié)作式地使用以最大化客戶體驗。

如上所述，常規(guī)網(wǎng)絡(luò)分析傾向于僅僅依靠技術(shù)qos度量。這些系統(tǒng)利用諸如信號強(qiáng)度、失誤率、寬帶、吞吐量、傳送延遲、可用性和抖動的度量。但是，今天使用的蜂窩和無線網(wǎng)絡(luò)在蜂窩網(wǎng)絡(luò)自身外部具有許多組件。另外，qos度量經(jīng)常不能識別某些問題，因為它們不能測量整體系統(tǒng)性能。換言之，qos度量不能從用戶視角測量系統(tǒng)的整體性能，恰恰因為它們不能監(jiān)控蜂窩網(wǎng)絡(luò)外部的許多組件。

歸因于相同網(wǎng)絡(luò)上用戶的絕對數(shù)量，用戶可能會對大體育場的服務(wù)速度感到失望。但是，對于qos度量，如果以高于正常利用率使用，系統(tǒng)可呈現(xiàn)為標(biāo)稱¹運(yùn)行。另外，例如，如果用戶體驗掉話但是在預(yù)定期間(例如，30秒)內(nèi)掛斷手機(jī)，盡管如此，則qos系統(tǒng)可注冊成功的呼叫，因為ue側(cè)的數(shù)據(jù)不可用。有許多這樣的實(shí)例，即qos系統(tǒng)指示良好的qos，但是用戶體驗較差的qoe。

¹此處所使用的標(biāo)稱是工程意義上的。換言之，例如如果系統(tǒng)以高于或低于某些公差(例如，20mbps±2mbps)的預(yù)定下載速度操作，則系統(tǒng)是標(biāo)稱操作的。由于不同類型的網(wǎng)絡(luò)具有廣泛不同的數(shù)據(jù)和錯誤率，因此，該術(shù)語不意欲是限制性的，而僅表達(dá)正常操作的范圍。

從客戶保留和滿意視角看，qoe比qos更重要。換言之，掉話的用戶不介意從qos觀點(diǎn)看網(wǎng)絡(luò)呈現(xiàn)為標(biāo)稱運(yùn)行。用戶所知道的是，他們的呼叫掉話了。例如，掉話是用戶從一個蜂窩運(yùn)營商切換為以一個蜂窩運(yùn)營商的主要原因。類似地，如果用戶的蜂窩手機(jī)顯示“5格”，但是他的手機(jī)需要10分鐘下載電子郵件，他同樣會不滿意。

為了這個目的，除此之外，本公開的示例涉及系統(tǒng)和方法，其結(jié)合了qos和qoe度量，以定位和消除系統(tǒng)瓶頸和/或提供可選配置。這種系統(tǒng)可包括一個或更多個ue上的應(yīng)用以提供用戶側(cè)的數(shù)據(jù)。該系統(tǒng)也可從蜂窩網(wǎng)絡(luò)供應(yīng)商(例如t-mobile)和網(wǎng)絡(luò)內(nèi)容供應(yīng)商(例如facebook和youtube)收集數(shù)據(jù)并且從用戶調(diào)查數(shù)據(jù)。在一些示例中，系統(tǒng)可提供一個或更多個圖形用戶界面(gui)，以向用戶提供一個或更多個網(wǎng)絡(luò)和/或應(yīng)用的實(shí)時性能數(shù)據(jù)。在其他示例中，系統(tǒng)可提供高度?；男阅艿貓D，以使消費(fèi)者能夠解決網(wǎng)絡(luò)問題或做出設(shè)備和供應(yīng)商選擇。本公開的示例也可包括旨在分析多重數(shù)據(jù)源以定位和為網(wǎng)絡(luò)瓶頸提供解決方案的方法。

圖1描繪了包括2g105、3g110和4glte115組件的常規(guī)蜂窩網(wǎng)絡(luò)。如所屬領(lǐng)域已知的，利用電路交換調(diào)制解調(diào)器連接(或非-3gpp連接)120(這就提供了相對低的數(shù)據(jù)速率)或經(jīng)由基于ip的分組交換125連接(這導(dǎo)致更高的寬帶)可從因特網(wǎng)或其他來源路由數(shù)據(jù)。lte系統(tǒng)115，其為純基于ip的，利用直接從因特網(wǎng)到服務(wù)體系架構(gòu)演化網(wǎng)關(guān)(saegw)130到演進(jìn)的節(jié)點(diǎn)b收發(fā)器115，其使能了更大的吞吐量，實(shí)質(zhì)上“平面化”了體系架構(gòu)。許多ue135還具有無線局域網(wǎng)絡(luò)(wlan)140能力，在某些情形中，這甚至使能更高的吞吐量。

qos系統(tǒng)150通常僅覆蓋蜂窩系統(tǒng)終端組件(例如網(wǎng)關(guān)130、塔臺115等)。顯著地，位于qos系統(tǒng)150的范圍外的一個主要組件是ue135。這就包括各種電話、智能手機(jī)、平板電腦和計算機(jī)并且也可包括大量的操作系統(tǒng)(例如windows、ios、android等)。ue也包括大量物理布局，其例如可影響天線接收、處理器速度和電池壽命。因此，由于常規(guī)qos技術(shù)不能監(jiān)控從ue135出現(xiàn)的失誤和問題，因此，系統(tǒng)缺失主要的診斷組。

另外，諸如，例如但不限于twitter、facebook、instagram和youtube的應(yīng)用供應(yīng)商155提供用于在ue135上使用的移動應(yīng)用。一些，如youtube要求相對高的數(shù)據(jù)寬帶，以流化或下載視頻，但是例如它們更少地依賴于響應(yīng)時間。其他的，如線上游戲，反而需要快速響應(yīng)時間和快速蜂窩切換(即隨著用戶行進(jìn)，將ue135從移動塔臺115移交到下一個)以維持播放的連續(xù)性。同樣對于其他應(yīng)用，例如制作語音呼叫，具有更低的寬帶要求，但要求非常低的失誤率以例如防止掉話和音頻失真(artifact)。

這些應(yīng)用中的每一個可通過強(qiáng)的4glte連接容易地處理。不幸的是，提供4glte覆蓋所要求的設(shè)備還沒有被完全部署，并且因此4glte網(wǎng)絡(luò)不會總是可用的。這也沒有解決如上所述的體育場問題，因為任何網(wǎng)絡(luò)可處理的用戶數(shù)量有限制。另外，在特定區(qū)域，地理、電氣和氣象條件可阻礙或干擾信號。因此，在一些情況下，使用傳統(tǒng)2g或3g連接是有益的，其可能未充分使用，例如因為認(rèn)為它們是過時的。在一些情況下，利用wlan140寬帶補(bǔ)充或替代蜂窩寬帶也是有用的。如下所述，本公開的示例能使得蜂窩服務(wù)供應(yīng)商對用戶分類，識別需要，定位瓶頸，以及為網(wǎng)絡(luò)問題提供解決方案。

如上所述，具有常規(guī)qos系統(tǒng)150的問題為它不將所有或甚至大多數(shù)能導(dǎo)致問題的變量納入考量。例如，qos系統(tǒng)150沒有監(jiān)控ue135側(cè)問題。因此，如果特定電話或應(yīng)用正在產(chǎn)生問題，則qos系統(tǒng)150不能檢測這些問題。類似地，qos系統(tǒng)150沒有接收來自應(yīng)用供應(yīng)商155的數(shù)據(jù)。因此，qos系統(tǒng)150能提供高速和寬帶，但應(yīng)用a仍舊在ue135上拖延。不幸的是，對于蜂窩服務(wù)供應(yīng)商而言，用戶不知道(或在意)問題出在哪里，他們只想讓事情正常運(yùn)轉(zhuǎn)。

結(jié)果是，不同應(yīng)用可能或多或少適合不同連接類型并且反之亦然。由此，為了幫助作出決策和解決問題，本公開的示例可包括高度?；蛏踔羵€性化的服務(wù)地圖。如圖2所示的，常規(guī)覆蓋地圖是有用的，但趨向于僅顯示信息的大致范圍(swathes)。地圖可能不會提供具有足夠高的粒度的信息以確定雖然你住在具有大致良好覆蓋的區(qū)域，但是例如，你和你的鄰居住宅位于完全阻塞信號的山后面。類似地，一些住宅的配線和構(gòu)造可阻塞大部分的蜂窩信號。

為了這個目的，從個體用戶、蜂窩供應(yīng)商和內(nèi)容供應(yīng)商收集的數(shù)據(jù)可聚集到可用于制造高度粒化地圖的數(shù)據(jù)庫中。如圖3a所示的，例如，地圖可包括多個網(wǎng)絡(luò)類型310，并且在一些示例中，可細(xì)化到個體位置305水平。地圖300可使用qos和qoe度量組合(“組合數(shù)據(jù)”)以向那個位置的用戶提供經(jīng)預(yù)測的qoe。換句話說，qos度量可指示用戶在特定位置可完全接入4glte。但是，來自之前或連續(xù)用戶的qoe度量可指示地理問題或防止可接受的4glte覆蓋的其他異常現(xiàn)象。

結(jié)果是，在一些示例中，地圖300可基于組合數(shù)據(jù)僅顯示預(yù)測為在特定位置可獲得或在特定位置305處的網(wǎng)絡(luò)類型。位置可包括許多特定位置，其中關(guān)于蜂窩服務(wù)的數(shù)據(jù)是有用的，諸如，例如但不限于住宅、建筑、商場和各種公共使用區(qū)域(例如具有公共訪問的公園和機(jī)場)。在其他示例中，地圖300可提供網(wǎng)絡(luò)性能預(yù)測符315，例如等級(如a、b、c、d)、紅燈/綠燈、檢查標(biāo)記或向特定位置可獲得的各種網(wǎng)絡(luò)提供的其他網(wǎng)絡(luò)性能預(yù)測符315。

例如，特定位置305a處的4glte覆蓋可提供較差的qoe，但是，2g和3gqoe非常好。這可由位置305a自身和地理位置導(dǎo)致，因為3g網(wǎng)絡(luò)使用不同的蜂窩信號塔，或其他技術(shù)。但是這些異常情況不能從網(wǎng)絡(luò)或qos側(cè)檢測到，而是可利用qoe度量容易地檢測到。如果有問題的用戶主要進(jìn)行語音呼叫，由此它們可被3g網(wǎng)絡(luò)很好地服務(wù)。另一方面，如果用戶頻繁使用數(shù)據(jù)，他們可決定在家使用wlan連接，這就回避了4glte覆蓋問題。

相反地，地圖能使得服務(wù)供應(yīng)商(例如t-mobile)確定是否需要網(wǎng)絡(luò)修改或問題(例如地理或氣象的)是否不受他們控制。換言之，歸因于地圖300的高度粒化以及從ue和/或用戶加入的輸入，服務(wù)供應(yīng)商可確定覆蓋問題是否普遍、局部或甚至位于特定位置305。例如，如果即使存在足夠數(shù)量的蜂窩接收塔，問題也普遍存在，服務(wù)供應(yīng)商可決定安裝額外的蜂窩接收塔。在另一方面，如果問題是局部或個別的，服務(wù)同硬傷可決定向受影響的客戶提供例如無線路由器。

在一些示例中，地圖300也可包括網(wǎng)絡(luò)問題預(yù)測符320。例如，如果基于下載時間、吞吐量時間或其他因素的用戶體驗，特定網(wǎng)絡(luò)類型沒有在特定位置大致標(biāo)稱地運(yùn)行(即響應(yīng)時間較慢、吞吐量較低等)，地圖300可顯示原因，如果已知的話。地圖300具有指示地理問題存在的地理問題指示符320a。這歸因于地方拓?fù)洹⒋笮徒ㄖ蚱渌枞涓C信號的其他物理特征。類似地，如果問題由距離導(dǎo)致，雖然qos度量會以其他方式指示，例如，地圖300可顯示距離問題指示符320b。這歸因于局部干擾源，例如盡管位置處于蜂窩系統(tǒng)的正常操作范圍之內(nèi)，但該局部干擾源減少了這個區(qū)域中的蜂窩系統(tǒng)的有效范圍。

因為地圖300的粒度，地圖300還可具有位置問題指示符320c。換言之，如果基于圍繞其的位置305、位置305處的信號強(qiáng)度和/或其他音素，特定位置305應(yīng)該具有良好接收，但事實(shí)并非如此，則位置305自身可能導(dǎo)致問題。例如，這就歸因于位置內(nèi)的配線、構(gòu)造或其他因素，它們會阻塞蜂窩信號(例如住宅內(nèi)的配線可有效地制造法拉第籠)。在這種情況下，地圖300可顯示位置問題指示符320c，以提示用戶進(jìn)行進(jìn)一步的調(diào)查。

在其他的實(shí)施例中，地圖300可針對ue135的類型進(jìn)行定制。例如，如果qoe問題已經(jīng)在位置305處被報告，但僅針對特定ue(例如設(shè)備a)；則地圖300可為用戶定制針對這種類型的ue135。換言之，地圖300可針對設(shè)備a顯示一組預(yù)測符315、320并且為設(shè)備b顯示另一組。以這種方式，用戶不會對潛在ue135問題導(dǎo)致的較差的qoe感到失望。

在其他示例中，如圖3b和3c所示的，系統(tǒng)可包括gui350以使得用戶輸入他們的地址并且接收他們住宅內(nèi)覆蓋的反饋。所以，例如，用戶可在地址字段355內(nèi)輸入他們的地址并且基于組合數(shù)據(jù)(關(guān)于那個網(wǎng)絡(luò)是可用的并且會以滿意的方式運(yùn)行)接收反饋360。在一些示例中，如圖所示，反饋360可包括簡單的復(fù)選標(biāo)記或x-標(biāo)記。在一些示例中，反饋360可包括，例如但不限于，信號計量器(meter)、紅燈/黃等/綠燈指示符或等級。

在一些示例中，gui350也可包括關(guān)于用戶蜂窩習(xí)慣的一個或多個輸入。如圖3b顯示的，在一些示例中，輸入可包括要求用戶排名的應(yīng)用列表370。應(yīng)用370可包括，例如，電子郵件和因特網(wǎng)瀏覽應(yīng)用、社交媒體站點(diǎn)和視頻頻道。在其他示例中，如圖3c所示，用戶可簡單地被要求對他們最多使用的數(shù)據(jù)375的類型進(jìn)行排名。數(shù)據(jù)375的類型可包括，例如但不限于，語音呼叫、電子郵件、因特網(wǎng)和視頻。同樣在其他示例中，用戶可利用復(fù)選標(biāo)記或其他指示符簡單地指示他們使用的什么應(yīng)用或什么類型的數(shù)據(jù)。

如果可應(yīng)用，gui350還可包括特殊服務(wù)推薦365。如圖3b顯示的，如果例如基于組合數(shù)據(jù)預(yù)測用戶在他的位置305處具有強(qiáng)的4glte覆蓋，則不需要特殊服務(wù)推薦365，因為用戶應(yīng)該具有良好的功能。另一方面，如果如圖3c所示，用戶頻繁使用數(shù)據(jù)并且被預(yù)測為具有較差數(shù)據(jù)網(wǎng)絡(luò)覆蓋，則特殊服務(wù)推薦365可包括wlan連接、無線熱點(diǎn)或其他解決方案以提供所希望的網(wǎng)絡(luò)性能。

本公開的示例也可包括gui400，以基于組合數(shù)據(jù)提供實(shí)時的或接近實(shí)時的、ue415上的一個或更多個應(yīng)用405或網(wǎng)絡(luò)接口410的狀態(tài)。如圖4a所示，例如，在一些示例中，gui400實(shí)質(zhì)上包括用于進(jìn)行各種網(wǎng)絡(luò)連接的ue上的“儀表盤”。gui400可提供速度計420、燃油量表425或其他相似表示以描繪對網(wǎng)絡(luò)速度的當(dāng)前狀態(tài)、響應(yīng)時間、可獲得寬帶、失誤率等的預(yù)測。這些度量例如可基于結(jié)合了ue數(shù)據(jù)和/或來自靠近用戶的用戶的反饋的實(shí)際測量性能。在一些示例中，gui400可為，例如但不限于可用的2g、3g、4glte和wlan網(wǎng)絡(luò)提供這些度量。

gui400還可包括針對板上的ue415度量(例如但不限于處理器使用425a、可用的緩沖器425b和可用的存儲器425c)的燃油量表425或其他指示符，。因此，例如，當(dāng)使用應(yīng)用a時，如果用戶體驗緩慢響應(yīng)，則gui400可指示具有很少或沒有剩余的緩沖器425b(這導(dǎo)致應(yīng)用a停止并且被過度地重新緩沖)。如果可以的化，用戶可希望重新開啟他的電話，停止其他應(yīng)用或創(chuàng)建更大的頁面文件。類似地，如果gui400指示過多的處理器使用425a，則用戶可再次希望停止未使用的應(yīng)用或重新啟動。如果用戶的處理器持續(xù)地工作過度(例如，他玩游戲或簡單地具有更舊的手機(jī))，他會希望更新他的ue415到具有更強(qiáng)有力的處理器的一個。

在其他示例中，如圖4b所示的，系統(tǒng)450可提供對系統(tǒng)性能更高水平的視圖。換句話說，一些用戶可能對為什么特定應(yīng)用緩慢運(yùn)行不感興趣，但僅希望知道其在緩慢運(yùn)行。例如，用戶可能不關(guān)心他們什么時候看見特定視頻或需要來自社交站點(diǎn)立即的狀態(tài)更新。例如，在體育場示例中，用戶可簡單地在他們的主屏幕452上瀏覽而非打開社交站點(diǎn)，而僅為了對緩慢響應(yīng)和上載時間感到失望。在主屏幕452上，標(biāo)準(zhǔn)的應(yīng)用圖標(biāo)465可通過對應(yīng)用當(dāng)前被預(yù)測為如何運(yùn)行的標(biāo)記而補(bǔ)充，無論是由于網(wǎng)絡(luò)、應(yīng)用或ue問題。應(yīng)用性能預(yù)測符455可包括，例如但不限于，彩色指示符455a(例如紅、黃和綠燈)、復(fù)選標(biāo)記和x's455b或計量表(例如應(yīng)用速度計覆蓋455c)。如上所述，應(yīng)用性能預(yù)測符455可將與經(jīng)測量的網(wǎng)絡(luò)性能相關(guān)的qos度量和例如來自ue應(yīng)用和用戶輸入的數(shù)據(jù)組合。

在一些實(shí)施例中，系統(tǒng)400可使用關(guān)于各種應(yīng)用和網(wǎng)絡(luò)的當(dāng)前的qoe的實(shí)時用戶輸入。所以，例如，如果多個用戶在前述體育場并且他們中一個或多個報道應(yīng)用a緩慢執(zhí)行，這種數(shù)據(jù)可整合到應(yīng)用性能預(yù)測符455內(nèi)。類似地，還可包括應(yīng)用供應(yīng)商報道的問題(例如服務(wù)器中斷)以提供對用戶的可能的qoe的準(zhǔn)確預(yù)測。

在一些示例中，應(yīng)用性能預(yù)測符455還可包括應(yīng)用問題指示符460。換句話說，除了提供性能特定應(yīng)用的信息，應(yīng)用問題指示符460還可通過提供字母或符號(例如指示各種系統(tǒng)組件的那些)來提供有關(guān)當(dāng)前瓶頸的信息。例如，如果因為應(yīng)用本身的問題(例如網(wǎng)絡(luò)內(nèi)容供應(yīng)商向系統(tǒng)報告拒絕服務(wù)攻擊)而應(yīng)用a緩慢，則問題指示符可針對“供應(yīng)商”顯示“p”460a。另一方面，例如，如果是4glte網(wǎng)絡(luò)的問題(例如移動供應(yīng)商報告塔臺問題)，則問題指示符可針對網(wǎng)絡(luò)顯示“4g”或“n”460b。如果其他網(wǎng)絡(luò)可用，這可使得用戶能嘗試其他可用的網(wǎng)絡(luò)(例如3g)，或簡單地等待問題清除。同樣地，如果ue415是問題，則問題指示符可顯示“ue問題，”460c或相似物。這可提示用戶檢查gui400儀表盤以觀察問題是否可容易地在ue415上改正(例如通過重啟)。當(dāng)然，這種問題可由應(yīng)用自身產(chǎn)生。在這種情況下，例如對于應(yīng)用或相似物，這種問題指示符可包括“a”460d。

同樣在其他示例中，系統(tǒng)450可能不能識別問題或可能具有多個成因。例如，在這種情景中，系統(tǒng)450可顯示問號460b。如果希望的話，用戶可隨后等待以查看一個或更多個問題是否自行解決、檢查gui400儀表盤、重啟ue或呼叫技術(shù)支持。在一些示例中，預(yù)測為標(biāo)稱運(yùn)行的應(yīng)用可利用復(fù)選標(biāo)記455b指示或僅具有應(yīng)用圖標(biāo)465-即，沒有標(biāo)記(其指示沒有問題)。

本公開的示例還包括系統(tǒng)500，其用于監(jiān)控和分析整個qoe域，包括qos度量。在一些示例中，系統(tǒng)500可包括處理器505，其用于接收多個輸入并且生成多個輸出。在一些示例中，處理器505可包括計算機(jī)處理器、膝上型筆記本、平板電腦、專用集成電路(asic)，或現(xiàn)場可編程門陣列(fpga)。

處理器505可接收來自多個源的數(shù)據(jù)以提供改進(jìn)的整體系統(tǒng)分析。處理器505例如可從應(yīng)用供應(yīng)商515接收數(shù)據(jù)，它可包括諸如，例如但不限于twitter、facebook、instagram和youtube的應(yīng)用。應(yīng)用供應(yīng)商515可提供有關(guān)用戶如何訪問他們的應(yīng)用、使用位置和其他度量的信息。與網(wǎng)絡(luò)或其他問題相對，這可使得系統(tǒng)500識別由應(yīng)用或應(yīng)用供應(yīng)商自身導(dǎo)致的問題。

同樣地，如下所述，在一些示例中，處理器505可接收來自ue上的應(yīng)用520的數(shù)據(jù)。應(yīng)用520可編譯來自ue自身的數(shù)據(jù)(例如但不限于信號強(qiáng)度、位置、處理器、緩沖器和存儲使用、交談時間、互聯(lián)網(wǎng)連接時間、下載速度和數(shù)據(jù)使用)。與其他因素相對，這可使得系統(tǒng)500識別由ue導(dǎo)致的問題。例如，如果用戶是游戲玩家，并且ue應(yīng)用520持續(xù)報告來自ue應(yīng)用520的高處理器使用和/或高延時，則系統(tǒng)500可確定ue是可能的瓶頸，其例如可通過新的電話來解決。

處理器505也可接收來自一個或多個因特網(wǎng)服務(wù)供應(yīng)商(isps)525的數(shù)據(jù)。isp數(shù)據(jù)525可提供關(guān)于ue因特網(wǎng)數(shù)據(jù)使用的信息(例如，在wlan連接上)、因特網(wǎng)供應(yīng)商網(wǎng)絡(luò)流量和速度，以及整體的因特網(wǎng)速度(例如，由于頻繁使用，因特網(wǎng)本身可能實(shí)際上減慢)。isp數(shù)據(jù)525可使得系統(tǒng)500識別isp瓶頸、isp的平均速度、可靠性等。這使得系統(tǒng)500通過網(wǎng)絡(luò)問題來識別isp以及不通過網(wǎng)絡(luò)問題來識別isp。例如，這可導(dǎo)致與提供最好服務(wù)的那些isps產(chǎn)生合作關(guān)系。

處理器505也可接收來自一個或多個蜂窩供應(yīng)商530的數(shù)據(jù)。蜂窩供應(yīng)商530，例如t-mobile，可提供關(guān)于蜂窩系統(tǒng)流量和負(fù)載、網(wǎng)絡(luò)故障時間、維護(hù)和用戶簡檔的信息。用戶簡檔可包括，例如但不限于，ue、位置使用和蜂窩塔網(wǎng)絡(luò)使用(例如3g相較于4glte)。這就使得系統(tǒng)500快速識別蜂窩供應(yīng)商的問題。

另外，系統(tǒng)500也可利用常規(guī)網(wǎng)絡(luò)(qos)度量535。qos度量535可用來識別網(wǎng)絡(luò)側(cè)因素，例如，網(wǎng)絡(luò)寬帶、響應(yīng)時間、切換時間和使用。例如，如果qos度量535指示一部分網(wǎng)絡(luò)始終如一地具有高使用率，則那部分的網(wǎng)絡(luò)可能需要額外的寬帶容量。這可能是因為那部分網(wǎng)絡(luò)位于人口特別稠密的地區(qū)(例如曼哈頓)或因為那部分位于高于正常使用的地區(qū)(例如硅谷)。

處理器505也可直接從用戶接收數(shù)據(jù)。在一些示例中，例如，可包括用戶的電子郵件、電話，以及與服務(wù)供應(yīng)商570的其他連接。所以，例如如果用戶發(fā)送電子郵件或聯(lián)系幫助桌面，則可包括與用戶問題相關(guān)的數(shù)據(jù)。在一些示例中，系統(tǒng)500也可包括線上應(yīng)用575、ue580上的應(yīng)用、調(diào)查或從用戶收集數(shù)據(jù)的其他手段。應(yīng)用575可包括關(guān)于用戶感知到的qoe的問題(即不管原始數(shù)據(jù)如何)。因此，如果用戶對他們的服務(wù)不滿意，技術(shù)問題可基于qos數(shù)據(jù)而被識別。如果沒有技術(shù)問題能被識別，例如，系統(tǒng)500可向用戶發(fā)起呼叫，以識別可能的用戶或設(shè)置問題。例如，如果用戶對應(yīng)用不滿意僅僅因為他不能找出如何使用它，這些問題可在問題升級和/或用戶轉(zhuǎn)換運(yùn)營商之前解決。

在一些示例中，處理器505可將組合數(shù)據(jù)(qoe和qos數(shù)據(jù))編譯成數(shù)據(jù)庫510。在一些示例中，數(shù)據(jù)庫510可包括正常系統(tǒng)運(yùn)行(即當(dāng)?shù)粼?、失誤、延遲等的數(shù)量為標(biāo)稱時)的數(shù)據(jù)和系統(tǒng)故障的數(shù)據(jù)。在一些示例中，處理器505可識別和對數(shù)據(jù)庫條目做標(biāo)記(即，不管是標(biāo)稱數(shù)據(jù)點(diǎn)還是故障數(shù)據(jù)點(diǎn))。例如，除此之外，可使用數(shù)據(jù)庫510以生成前述的性能地圖300。

由于系統(tǒng)500提供的細(xì)節(jié)水平，除此之外，地圖300可包括關(guān)于經(jīng)預(yù)測的網(wǎng)絡(luò)性能、isp性能和ue性能的多層數(shù)據(jù)。因此，地圖300可在多層次處被使用。例如，地圖300可被蜂窩用戶使用，以確定住宅內(nèi)或工作處哪些類型的網(wǎng)絡(luò)可用來預(yù)測性能、識別問題和提供解決方案，如果適用的話。蜂窩供應(yīng)商可使用地圖300以識別當(dāng)前的并且預(yù)測將來的接收較差的區(qū)域、高使用區(qū)域和/或為客戶提供可選項。除此之外，應(yīng)用供應(yīng)商和isp可出于技術(shù)和市場目的來使用地圖以識別用戶。

數(shù)據(jù)庫510還可用于識別和/或預(yù)測不能以其他方式意識到的問題。因為數(shù)據(jù)庫510包括來自蜂窩系統(tǒng)(包括移動供應(yīng)商、網(wǎng)絡(luò)、應(yīng)用和用戶)的qos和qoe終端的數(shù)據(jù)；例如，由特定ue、應(yīng)用或蜂窩塔導(dǎo)致的問題能被快速識別。另外，可挖掘數(shù)據(jù)庫510以識別潛在問題并且提供特定于位置的qoe預(yù)測符。例如，如果特定用戶的數(shù)據(jù)使用增加，則這就暴露了之前沒有明顯出現(xiàn)的用戶連接中的弱點(diǎn)。數(shù)據(jù)庫510可預(yù)測該問題，并且在一些示例中，提供可選項，其主動修復(fù)問題(或至少更快)。服務(wù)供應(yīng)商采取的這些類型的主動測量創(chuàng)建強(qiáng)的客戶忠誠度。

例如，僅使用qos數(shù)據(jù)會指示特定蜂窩塔正在不成比例地掉話。例如，這會導(dǎo)致供應(yīng)商推斷塔臺具有存在缺陷的天線或其他問題。如果特定類型的ue(例如設(shè)備a)對特定蜂窩塔上的所有(或大多數(shù))呼叫進(jìn)行了掉話，但是系統(tǒng)500可從ue應(yīng)用520、移動供應(yīng)商530或它們的組合將問題識別為ue而非塔臺。例如，這種數(shù)據(jù)可提供到手機(jī)制造商以提示軟件修復(fù)，如果適用的話。沒有用于對比的qoe數(shù)據(jù)，常規(guī)qos度量不會檢測到該問題，更不必說查明這個問題。

將系統(tǒng)數(shù)據(jù)庫510內(nèi)來自系統(tǒng)500的數(shù)據(jù)聚集可實(shí)現(xiàn)進(jìn)一步分析并且預(yù)測將來的性能。因此，例如，如果在特定區(qū)域所有或幾乎所有設(shè)備a掉話，但電話的其他模型不會，問題很可能會縮小到電話的類型。例如，這就使能對軟件或系統(tǒng)設(shè)置的分析以嘗試定位解決方案。如果必要的話，可進(jìn)行軟件更新以修復(fù)問題。在一些問題中，系統(tǒng)500可推薦不同的ue以避免這些問題。

在一些示例中，例如，4g模式中可出現(xiàn)問題，但非在3g模式中出現(xiàn)問題。如果用戶可主要進(jìn)行語音通話，因此切換到這個蜂窩(如果可用的話)的3g網(wǎng)絡(luò)可為可行的可替換方案。當(dāng)然，可出現(xiàn)不能容易解決問題的局部條件。因此，對于生活或工作在超載或具有艱險的地理(例如多山的地形內(nèi)的蜂窩中的客戶，解決方案可為向用戶提供wlan路由器以使得用戶能夠經(jīng)由wlan連接訪問voip和數(shù)據(jù)?？蛇x地，如果問題對于手機(jī)是獨(dú)特的，則解決方案為提供給用戶不同的模型的手機(jī)(如果有必要，花很少錢或不花錢)。

本公開的示例也包括跟蹤一個或多個板上ue功能的應(yīng)用600。在一些示例中，例如應(yīng)用600可運(yùn)行在ue的處理器605上，并且接收來自ue的輸入。例如，應(yīng)用600可接收來自ue存儲器610和/或存儲緩沖器615的輸入。這就使得應(yīng)用600監(jiān)控例如瞬時和平均緩沖器615的使用、實(shí)際下載速度(與qos側(cè)提供的那些相對)、應(yīng)用響應(yīng)時間等。例如，如果用戶觀看許多因特網(wǎng)視頻內(nèi)容，則可批準(zhǔn)(warrant)更大的頁面文件或具有更大存儲容量的ue。類似地，在一些示例中，應(yīng)用600可接收來自ue的處理器605的輸入。例如，這就使得應(yīng)用600監(jiān)控瞬時和平均處理器605的使用、響應(yīng)時間、處理時間等。例如，如果用戶是游戲玩家，則可批準(zhǔn)更快的處理器以限制凍結(jié)和/或生成更流暢的圖形。

在一些示例中，應(yīng)用600也可對內(nèi)部失誤和掉話625做日志。如上所述，在某些條件期間(例如用戶聽到掉話后立即掛斷電話)，qos監(jiān)控可能不能檢測到掉話。與此不同，從ue側(cè)檢測掉話和失誤率625能使得應(yīng)用600對可能以其他方式被忽視的掉話做日志。例如，將qos數(shù)據(jù)和ue側(cè)數(shù)據(jù)625相比能使得供應(yīng)商查明潛在問題-即確定是網(wǎng)絡(luò)問題還是ue的問題。例如，由于ue的問題(例如生產(chǎn)或軟件問題)或發(fā)生故障的蜂窩塔可能導(dǎo)致掉話625，利用其它手段可能不能輕易地檢測出來。

在一些示例中，應(yīng)用600也可從ue接收器或天線系統(tǒng)620接收輸入。這就使得應(yīng)用600能夠?qū)τ嘘P(guān)信號強(qiáng)度、失誤率、窺探(ping)時間和其他數(shù)據(jù)的信息做日志。這種數(shù)據(jù)可用于性能地圖300以識別發(fā)生故障的蜂窩塔并且識別發(fā)生故障的天線和收發(fā)機(jī)620。如上所述，如果特定類型的ue在特定區(qū)域顯示非常規(guī)接收，則ue的天線設(shè)計(除此之外)可能為元兇。當(dāng)然，如果特定塔臺上的所有ue顯示低于期望的信號，那么塔臺會例如出現(xiàn)接地故障、供電問題或失效發(fā)送機(jī)。

本公開的示例也可包括用于分析和定位網(wǎng)絡(luò)瓶頸的方法700。如上所述，傳統(tǒng)qos系統(tǒng)不涵蓋整個蜂窩/無線系統(tǒng)。結(jié)果是，qos系統(tǒng)可能不會改正某些系統(tǒng)問題，因為其看不見它們。換言之，例如，如果問題是用戶要求ue具有更快的處理器(由于其使用模式)，僅查看網(wǎng)絡(luò)性能的qos系統(tǒng)不能識別這個問題。因此，需要將qos網(wǎng)絡(luò)數(shù)據(jù)和來自ue、因特網(wǎng)內(nèi)容供應(yīng)商和其他來源的qoe數(shù)據(jù)組合以定位和解決網(wǎng)絡(luò)瓶頸。

因此，在一些示例中，方法700可包括從數(shù)據(jù)庫510檢索故障以進(jìn)一步分析，如702顯示的。故障可為，例如但不限于，掉話、丟棄數(shù)據(jù)分組、延遲和再緩沖。由于具有多個類型的故障，如704顯示的，因此可通過識別故障類型繼續(xù)方法700。例如，如果故障是掉話704，則方法700可確定與故障相關(guān)聯(lián)的蜂窩塔是否有比常規(guī)更高的掉話率、微弱信號或其他問題，如706所示的。這就使得系統(tǒng)識別故障塔臺并且生成塔臺報告，如712所示的。塔臺報告712使得蜂窩供應(yīng)商通過讓塔臺回到其標(biāo)稱運(yùn)行而解決維護(hù)問題。

另一方面，如果塔臺具有常規(guī)失誤率，則方法700可確定特定ue是否具有高于常規(guī)的掉話率、微弱信號或其他問題，如708所示的。例如，如果ue具有高于常規(guī)的掉話率，則系統(tǒng)可產(chǎn)生ue報告，如714所示的。ue報告714可提供給蜂窩供應(yīng)商和/或蜂窩制造商。ue報告714也可和來自應(yīng)用600的數(shù)據(jù)相互參照以識別可能的故障組件(例如次貨收發(fā)機(jī))。這就能讓系統(tǒng)提供關(guān)于問題的可能解決方案的建議。如果問題是硬件問題，如發(fā)生故障的收發(fā)機(jī)，則解決方案可以是替換ue。如果問題看似不像硬件相關(guān)的問題，則需要額外的分析來定位軟件或其他問題。

如果問題看似不像和ue或塔臺相關(guān)的，則方法700可將故障加入到異常報告以用于進(jìn)一步分析，如710所示的。例如，如果特定用戶的ue-與特定類型的ue相對-在異常報告710中重復(fù)數(shù)顯，則故障可為ue自身。

類似地，方法700也能確定故障是應(yīng)用相關(guān)的問題(例如凍結(jié)、開啟失效或具有訪問問題)相關(guān)，如716所示的。如果是這樣，方法700可識別是否在故障發(fā)生時有任意網(wǎng)絡(luò)問題存在，如718顯示的。網(wǎng)絡(luò)問題718可由移動網(wǎng)絡(luò)問題產(chǎn)生，例如過載，這通常可從常規(guī)的qos度量535導(dǎo)出。網(wǎng)絡(luò)問題718還可從因特網(wǎng)問題產(chǎn)生，這可從以上討論的isp數(shù)據(jù)525識別。例如，如果問題確定為網(wǎng)絡(luò)，則故障可被添加到網(wǎng)絡(luò)報告728，這可在蜂窩和因特網(wǎng)問題之間做出區(qū)分。

如果故障由足球游戲造成，例如體育場場景中，在一些示例中，例如，蜂窩供應(yīng)商可決定在體育場安裝更多接入點(diǎn)。在其它示例中，因為它不是謹(jǐn)慎的資本投資(由于零星使用)蜂窩供應(yīng)商可能什么也不做。但是，如果網(wǎng)絡(luò)(蜂窩或因特網(wǎng))的特定部分在網(wǎng)路報告728中重復(fù)出現(xiàn)，則可希望增加接入點(diǎn)、更新接入點(diǎn)或安裝更大因特網(wǎng)連接的數(shù)量(例如這個位置的更大干線)。

另一方面，如果網(wǎng)絡(luò)故障發(fā)生時標(biāo)稱運(yùn)行，則方法700可確定特定ue是否具有高于常規(guī)的整體故障率，如720顯示的。例如，如果ue具有高于常規(guī)故障率，則系統(tǒng)可創(chuàng)建ue報告，如714顯示的。ue報告714可被提供給蜂窩供應(yīng)商和/或蜂窩制造商。ue報告714也可和來自應(yīng)用600的數(shù)據(jù)相互參照以識別可能的故障或過時的組件。

這就使得供應(yīng)商提供關(guān)于問題可能的解決方案的建議。如果應(yīng)用因處理器或存儲器供電不夠而凍結(jié)，則可通過參考應(yīng)用600來定位這個問題。例如，如果處理器在故障發(fā)生時過載，解決方案可為用具有更強(qiáng)大的處理器的產(chǎn)品來替代ue。如果問題看似不像和硬件相關(guān)，而是對特定類型的ue常見的，則需要額外分析以定位軟件沖突或其他問題。

如果故障對于特定類型的ue不是常見的，方法700可確定問題是否是應(yīng)用自身，如722所示的。應(yīng)用722可能僅具有不正常運(yùn)行的錯誤代碼，而不管ue如何。在一些實(shí)例中，應(yīng)用722可代表安全漏洞，并且故障可由病毒或其他惡意軟件導(dǎo)致。在這種情況下，例如，供應(yīng)商可決定向應(yīng)用發(fā)行商報告應(yīng)用并且建議用戶不使用應(yīng)用，或從ue和在線應(yīng)用商店移除應(yīng)用。除此之外，方法700可將重復(fù)導(dǎo)致故障的應(yīng)用添加至應(yīng)用報告，如724顯示的，這可向蜂窩供應(yīng)商、內(nèi)容供應(yīng)商和發(fā)行商提供。

如果問題看似不像和網(wǎng)絡(luò)、ue或應(yīng)用相關(guān)，則方法700可將故障加入到異常報告以用于進(jìn)一步的分析，如710所示的。即使當(dāng)它們在常規(guī)qos系統(tǒng)外部，方法700仍可定位系統(tǒng)故障。方法700可通常以主動方式實(shí)現(xiàn)對問題的定位，這也能導(dǎo)致解決方案。除此之外，方法700可讓供應(yīng)商向客戶提供更好的qoe，增加客戶忠誠度，以及保留以及減少與客戶服務(wù)和技術(shù)支持相關(guān)聯(lián)的成本。

以上雖然公開了多個可能的示例，但是，本公開的示例并非如此受限。例如，雖然公開了用于和蜂窩電話系統(tǒng)一起使用的系統(tǒng)和方法，但是能以類似方式分析其他系統(tǒng)或子系統(tǒng)而不偏離本公開的精神。另外，針對本公開的示例的不同特征(例如，步驟順序、蜂窩技術(shù)類型和監(jiān)控的組件)所使用的定位和配置可根據(jù)特定網(wǎng)絡(luò)或程序而變更，其例如由于網(wǎng)絡(luò)的尺寸或構(gòu)造、通信協(xié)議或使用的ue而要求稍作變化。這樣的變化旨在包括與本公開的范圍之內(nèi)。

特定的配置、對材料的選擇和不同元件的尺寸和形狀可根據(jù)特定設(shè)計規(guī)范或根據(jù)本公開的原理所構(gòu)建的設(shè)備、系統(tǒng)或方法所需要的限制而變化。這樣的變化旨在包括于本公開的范圍之內(nèi)。因此，當(dāng)前公開的示例在所有方面認(rèn)為是闡釋性的和非限制性的。本公開的范圍由所附權(quán)利要求而非前述說明指示，并且它們等同物的意義和范圍之內(nèi)的所有變化旨在包括在其內(nèi)。