本發(fā)明涉及互聯(lián)網(wǎng)
技術(shù)領(lǐng)域:
:,尤其涉及一種處理線上服務(wù)器的log數(shù)據(jù)的裝置及方法。
背景技術(shù):
::服務(wù)器在運(yùn)行的過(guò)程中會(huì)產(chǎn)生大量有用的日志(log)數(shù)據(jù),這些log數(shù)據(jù)主要用來(lái)記錄一些訪問(wèn)信息,以便在服務(wù)器出現(xiàn)狀況時(shí)可以根據(jù)log數(shù)據(jù)來(lái)判斷原因,幫助開(kāi)發(fā)人員更好地定位并修復(fù)問(wèn)題;或者,也可以通過(guò)對(duì)log數(shù)據(jù)的分析來(lái)了解用戶(hù)的行為,從而根據(jù)用戶(hù)的喜好為用戶(hù)提供精準(zhǔn)的個(gè)性化推薦。在日常的服務(wù)器開(kāi)發(fā)工作中,由于服務(wù)器開(kāi)發(fā)人員和運(yùn)維工程師不能夠?qū)崟r(shí)地進(jìn)行交流溝通,當(dāng)線上服務(wù)器出問(wèn)題之后,開(kāi)發(fā)人員首先需要向運(yùn)維工程師索要log數(shù)據(jù),繼而進(jìn)行問(wèn)題分析;這種方式對(duì)于開(kāi)發(fā)人員不能夠?qū)崟r(shí)獲取log數(shù)據(jù),從而延長(zhǎng)了修復(fù)線上服務(wù)器問(wèn)題的進(jìn)度,降低了工作效率。技術(shù)實(shí)現(xiàn)要素:有鑒于此,本發(fā)明實(shí)施例期望提供一種處理線上服務(wù)器的log數(shù)據(jù)的裝置及方法,以實(shí)現(xiàn)實(shí)時(shí)獲取線上服務(wù)器的log數(shù)據(jù)的目的,提高線上服務(wù)器的修復(fù)進(jìn)度,進(jìn)而提高工作效率。為達(dá)到上述目的,本發(fā)明的技術(shù)方案是這樣實(shí)現(xiàn)的:本發(fā)明提供一種處理線上服務(wù)器的log數(shù)據(jù)的裝置,所述裝置包括:獲取模塊,用于獲取線上服務(wù)器的日志log數(shù)據(jù);處理模塊,用于對(duì)所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行處理,得到處理后的log數(shù)據(jù);存儲(chǔ)模塊,用于將所述處理后的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引;呈現(xiàn)模塊,用于通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的log數(shù)據(jù)從所述數(shù)據(jù)庫(kù)中呈現(xiàn)。上述方案中,所述獲取模塊,具體用于通過(guò)活動(dòng)消息隊(duì)列activemq系統(tǒng)獲取所述線上服務(wù)器的log數(shù)據(jù),所述線上服務(wù)器的log數(shù)據(jù)是由所述線上服務(wù)器的文件系統(tǒng)監(jiān)控機(jī)制inotify客戶(hù)端監(jiān)控所述線上服務(wù)器得到的。上述方案中,所述處理模塊,具體用于通過(guò)分布式實(shí)時(shí)計(jì)算系統(tǒng)storm系統(tǒng)將所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行過(guò)濾,將過(guò)濾后的所述線上服務(wù)器的log數(shù)據(jù)生成固定格式的log數(shù)據(jù),將所述固定格式的log數(shù)據(jù)確定為所述處理后的log數(shù)據(jù);所述固定格式為時(shí)間+log級(jí)別+log所屬應(yīng)用模塊+log具體信息的格式。上述方案中,所述裝置還包括:合并模塊,用于通過(guò)所述storm系統(tǒng)根據(jù)預(yù)設(shè)條件合并所述固定格式的log數(shù)據(jù),得到合并后的固定格式的log數(shù)據(jù);所述預(yù)設(shè)條件包括如下至少之一:預(yù)設(shè)時(shí)間間隔、log數(shù)據(jù)級(jí)別、log數(shù)據(jù)所屬的應(yīng)用;所述處理模塊,還具體用于將所述合并后的固定格式的log數(shù)據(jù)確定為所述處理后的log數(shù)據(jù)。上述方案中,所述存儲(chǔ)模塊,具體用于將所述處理后的log數(shù)據(jù)使用分布式文件系統(tǒng)hdfs存儲(chǔ)到海杜普數(shù)據(jù)庫(kù)hbase數(shù)據(jù)庫(kù)的log數(shù)據(jù)表格table_log中,并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引。本發(fā)明提供一種處理線上服務(wù)器的log數(shù)據(jù)的方法,所述方法包括:獲取線上服務(wù)器的日志log數(shù)據(jù);對(duì)所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行處理,得到處理后的log數(shù)據(jù);將所述處理后的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引;通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的log數(shù)據(jù)從所述數(shù)據(jù)庫(kù)中呈現(xiàn)。上述方案中,所述獲取線上服務(wù)器的log數(shù)據(jù),包括:通過(guò)活動(dòng)消息隊(duì)列activemq系統(tǒng)獲取所述線上服務(wù)器的log數(shù)據(jù),所述線上服務(wù)器的log數(shù)據(jù)是由所述線上服務(wù)器的文件系統(tǒng)監(jiān)控機(jī)制inotify客戶(hù)端監(jiān)控所述線上服務(wù)器得到的。上述方案中,所述對(duì)所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行處理,得到處理后的log數(shù)據(jù),包括:通過(guò)分布式實(shí)時(shí)計(jì)算系統(tǒng)storm系統(tǒng)將所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行過(guò)濾,將過(guò)濾后的所述線上服務(wù)器的log數(shù)據(jù)生成固定格式的log數(shù)據(jù),將所述固定格式的log數(shù)據(jù)確定為所述處理后的log數(shù)據(jù);所述固定格式為時(shí)間+log級(jí)別+log所屬應(yīng)用模塊+log具體信息的格式。上述方案中,在所述將過(guò)濾后的所述線上服務(wù)器的log數(shù)據(jù)生成固定格式的log數(shù)據(jù)之后,所述方法還包括:通過(guò)所述storm系統(tǒng)根據(jù)預(yù)設(shè)條件合并所述固定格式的log數(shù)據(jù),得到合并后的固定格式的log數(shù)據(jù);所述預(yù)設(shè)條件包括如下至少之一:預(yù)設(shè)時(shí)間間隔、log數(shù)據(jù)級(jí)別、log數(shù)據(jù)所屬的應(yīng)用;所述將所述固定格式的log數(shù)據(jù)確定為所述處理后的log數(shù)據(jù),包括:將所述合并后的固定格式的log數(shù)據(jù)確定為所述處理后的log數(shù)據(jù)。上述方案中,所述將所述處理后的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引,包括:將所述處理后的log數(shù)據(jù)使用分布式文件系統(tǒng)hdfs存儲(chǔ)到海杜普數(shù)據(jù)庫(kù)hbase數(shù)據(jù)庫(kù)的log數(shù)據(jù)表格table_log中,并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引。本發(fā)明實(shí)施例所提供的處理線上服務(wù)器的log數(shù)據(jù)的裝置及方法,通過(guò)獲取線上服務(wù)器的log數(shù)據(jù),得到線上服務(wù)器的實(shí)時(shí)log數(shù)據(jù);然后對(duì)所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行處理,得到固定格式的log數(shù)據(jù),并將其確定為處理后的log數(shù)據(jù);再將所述處理后的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,以實(shí)現(xiàn)將線上服務(wù)器的實(shí)時(shí)log數(shù)據(jù)同步至除線上服務(wù)器以外的其他設(shè)備的目的;并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引,以方便后續(xù)對(duì)log數(shù)據(jù)的查找;最后通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的log數(shù)據(jù)從所述數(shù)據(jù)庫(kù)中呈現(xiàn);這樣便可以通過(guò)將線上服務(wù)器的實(shí)時(shí)log數(shù)據(jù)同步至除線上服務(wù)器以外的其他設(shè)備,實(shí)現(xiàn)實(shí)時(shí)獲取線上服務(wù)器的log數(shù)據(jù)的目的,進(jìn)而提高了線上服務(wù)器的修復(fù)進(jìn)度,提高了工作效率。附圖說(shuō)明圖1為實(shí)現(xiàn)本發(fā)明各個(gè)實(shí)施例的一個(gè)可選的移動(dòng)終端的硬件結(jié)構(gòu)示意圖;圖2為本發(fā)明實(shí)施例提供的移動(dòng)終端能夠操作的通信系統(tǒng)結(jié)構(gòu)示意圖;圖3為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的方法實(shí)施例一的流程圖;圖4為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的方法實(shí)施例二的流程圖;圖5為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的方法實(shí)施例二中處理線上服務(wù)器的log數(shù)據(jù)的架構(gòu)圖;圖6為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的方法實(shí)施例二中通過(guò)頁(yè)面url獲取log數(shù)據(jù)的示意圖;圖7為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的裝置實(shí)施例的結(jié)構(gòu)示意圖。具體實(shí)施方式下面將結(jié)合本發(fā)明實(shí)施例中的附圖,對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述。現(xiàn)在將參考附圖1來(lái)描述實(shí)現(xiàn)本發(fā)明各個(gè)實(shí)施例的移動(dòng)終端。在后續(xù)的描述中,使用用于表示元件的諸如“模塊”、“部件”或“單元”的后綴僅為了有利于本發(fā)明的說(shuō)明,其本身并沒(méi)有特定的意義。因此,"模塊"與"部件"可以混合地使用。移動(dòng)終端可以以各種形式來(lái)實(shí)施。例如,本發(fā)明中描述的終端可以包括諸如移動(dòng)電話(huà)、智能電話(huà)、筆記本電腦、數(shù)字廣播接收器、個(gè)人數(shù)字助理(pda)、平板電腦(pad)、便攜式多媒體播放器(pmp)、導(dǎo)航裝置等等的移動(dòng)終端以及諸如數(shù)字tv、臺(tái)式計(jì)算機(jī)等等的固定終端。下面,假設(shè)終端是移動(dòng)終端。然而,本領(lǐng)域技術(shù)人員將理解的是,除了特別用于移動(dòng)目的的元件之外,根據(jù)本發(fā)明的實(shí)施方式的構(gòu)造也能夠應(yīng)用于固定類(lèi)型的終端。圖1為實(shí)現(xiàn)本發(fā)明各個(gè)實(shí)施例的移動(dòng)終端的硬件結(jié)構(gòu)示意。移動(dòng)終端100可以包括無(wú)線通信單元110、音頻/視頻(a/v)輸入單元120、用戶(hù)輸入單元130、感測(cè)單元140、輸出單元150、存儲(chǔ)器160、接口單元170、控制器180和電源單元190等等。圖1示出了具有各種組件的移動(dòng)終端,但是應(yīng)理解的是,并不要求實(shí)施所有示出的組件,可以替代地實(shí)施更多或更少的組件,將在下面詳細(xì)描述移動(dòng)終端的元件。無(wú)線通信單元110通常包括一個(gè)或多個(gè)組件,其允許移動(dòng)終端100與無(wú)線通信系統(tǒng)或網(wǎng)絡(luò)之間的無(wú)線電通信。例如,無(wú)線通信單元可以包括廣播接收模塊111、移動(dòng)通信模塊112、無(wú)線互聯(lián)網(wǎng)模塊113、短程通信模塊114和位置信息模塊115中的至少一個(gè)。廣播接收模塊111經(jīng)由廣播信道從外部廣播管理服務(wù)器接收廣播信號(hào)和/或廣播相關(guān)信息。廣播信道可以包括衛(wèi)星信道和/或地面信道。廣播管理服務(wù)器可以是生成并發(fā)送廣播信號(hào)和/或廣播相關(guān)信息的服務(wù)器或者接收之前生成的廣播信號(hào)和/或廣播相關(guān)信息并且將其發(fā)送給終端的服務(wù)器。廣播信號(hào)可以包括tv廣播信號(hào)、無(wú)線電廣播信號(hào)、數(shù)據(jù)廣播信號(hào)等等。而且,廣播信號(hào)可以進(jìn)一步包括與tv或無(wú)線電廣播信號(hào)組合的廣播信號(hào)。廣播相關(guān)信息也可以經(jīng)由移動(dòng)通信網(wǎng)絡(luò)提供,并且在該情況下,廣播相關(guān)信息可以由移動(dòng)通信模塊112來(lái)接收。廣播信號(hào)可以以各種形式存在,例如,其可以以數(shù)字多媒體廣播(dmb)的電子節(jié)目指南(epg)、數(shù)字視頻廣播手持(dvb-h)的電子服務(wù)指南(esg)等等的形式而存在。廣播接收模塊111可以通過(guò)使用各種類(lèi)型的廣播系統(tǒng)接收信號(hào)廣播。特別地,廣播接收模塊111可以通過(guò)使用諸如多媒體廣播-地面(dmb-t)、數(shù)字多媒體廣播-衛(wèi)星(dmb-s)、數(shù)字視頻廣播-手持(dvb-h),前向鏈路媒體(mediaflo@)的數(shù)據(jù)廣播系統(tǒng)、地面數(shù)字廣播綜合服務(wù)(isdb-t)等等的數(shù)字廣播系統(tǒng)接收數(shù)字廣播。廣播接收模塊111可以被構(gòu)造為適合提供廣播信號(hào)的各種廣播系統(tǒng)以及上述數(shù)字廣播系統(tǒng)。經(jīng)由廣播接收模塊111接收的廣播信號(hào)和/或廣播相關(guān)信息可以存儲(chǔ)在存儲(chǔ)器160(或者其它類(lèi)型的存儲(chǔ)介質(zhì))中。移動(dòng)通信模塊112將無(wú)線電信號(hào)發(fā)送到基站(例如,接入點(diǎn)、節(jié)點(diǎn)b等等)、外部終端以及服務(wù)器中的至少一個(gè)和/或從其接收無(wú)線電信號(hào)。這樣的無(wú)線電信號(hào)可以包括語(yǔ)音通話(huà)信號(hào)、視頻通話(huà)信號(hào)、或者根據(jù)文本和/或多媒體消息發(fā)送和/或接收的各種類(lèi)型的數(shù)據(jù)。無(wú)線互聯(lián)網(wǎng)模塊113支持移動(dòng)終端的無(wú)線互聯(lián)網(wǎng)接入。該模塊可以?xún)?nèi)部或外部地耦接到終端。該模塊所涉及的無(wú)線互聯(lián)網(wǎng)接入技術(shù)可以包括wlan(無(wú)線lan)(wi-fi)、wibro(無(wú)線寬帶)、wimax(全球微波互聯(lián)接入)、hsdpa(高速下行鏈路分組接入)等等。短程通信模塊114是用于支持短程通信的模塊。短程通信技術(shù)的一些示例包括藍(lán)牙tm、射頻識(shí)別(rfid)、紅外數(shù)據(jù)協(xié)會(huì)(irda)、超寬帶(uwb)、紫蜂tm等等。位置信息模塊115是用于檢查或獲取移動(dòng)終端的位置信息的模塊。位置信息模塊115的典型示例是全球定位系統(tǒng)(gps)。根據(jù)當(dāng)前的技術(shù),gps的位置信息模塊115計(jì)算來(lái)自三個(gè)或更多衛(wèi)星的距離信息和準(zhǔn)確的時(shí)間信息并且對(duì)于計(jì)算的信息應(yīng)用三角測(cè)量法,從而根據(jù)經(jīng)度、緯度和高度準(zhǔn)確地計(jì)算三維當(dāng)前位置信息。當(dāng)前,用于計(jì)算位置和時(shí)間信息的方法使用三顆衛(wèi)星并且通過(guò)使用另外的一顆衛(wèi)星校正計(jì)算出的位置和時(shí)間信息的誤差。此外,gps的位置信息模塊115能夠通過(guò)實(shí)時(shí)地連續(xù)計(jì)算當(dāng)前位置信息來(lái)計(jì)算速度信息。a/v輸入單元120用于接收音頻或視頻信號(hào)。a/v輸入單元120可以包括相機(jī)121和麥克風(fēng)122,相機(jī)121對(duì)在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置獲得的靜態(tài)圖片或視頻的圖像數(shù)據(jù)進(jìn)行處理。處理后的圖像幀可以顯示在顯示單元151上。經(jīng)相機(jī)121處理后的圖像幀可以存儲(chǔ)在存儲(chǔ)器160(或其它存儲(chǔ)介質(zhì))中或者經(jīng)由無(wú)線通信單元110進(jìn)行發(fā)送,可以根據(jù)移動(dòng)終端的構(gòu)造提供兩個(gè)或更多相機(jī)121。麥克風(fēng)122可以在電話(huà)通話(huà)模式、記錄模式、語(yǔ)音識(shí)別模式等等運(yùn)行模式中經(jīng)由麥克風(fēng)122接收聲音(音頻數(shù)據(jù)),并且能夠?qū)⑦@樣的聲音處理為音頻數(shù)據(jù)。處理后的音頻(語(yǔ)音)數(shù)據(jù)可以在電話(huà)通話(huà)模式的情況下轉(zhuǎn)換為可經(jīng)由移動(dòng)通信模塊112發(fā)送到移動(dòng)通信基站的格式輸出。麥克風(fēng)122可以實(shí)施各種類(lèi)型的噪聲消除(或抑制)算法以消除(或抑制)在接收和發(fā)送音頻信號(hào)的過(guò)程中產(chǎn)生的噪聲或者干擾。用戶(hù)輸入單元130可以根據(jù)用戶(hù)輸入的命令生成鍵輸入數(shù)據(jù)以控制移動(dòng)終端的各種操作。用戶(hù)輸入單元130允許用戶(hù)輸入各種類(lèi)型的信息,并且可以包括鍵盤(pán)、鍋?zhàn)衅?、觸摸板(例如,檢測(cè)由于被接觸而導(dǎo)致的電阻、壓力、電容等等的變化的觸敏組件)、滾輪、搖桿等等。特別地,當(dāng)觸摸板以層的形式疊加在顯示單元151上時(shí),可以形成觸摸屏。感測(cè)單元140檢測(cè)移動(dòng)終端100的當(dāng)前拍攝狀態(tài),(例如,移動(dòng)終端100的打開(kāi)或關(guān)閉拍攝狀態(tài))、移動(dòng)終端100的位置、用戶(hù)對(duì)于移動(dòng)終端100的接觸(即,觸摸輸入)的有無(wú)、移動(dòng)終端100的取向、移動(dòng)終端100的加速或減速移動(dòng)和方向等等,并且生成用于控制移動(dòng)終端100的操作的命令或信號(hào)。例如,當(dāng)移動(dòng)終端100實(shí)施為滑動(dòng)型移動(dòng)電話(huà)時(shí),感測(cè)單元140可以感測(cè)該滑動(dòng)型電話(huà)是打開(kāi)還是關(guān)閉。另外,感測(cè)單元140能夠檢測(cè)電源單元190是否提供電力或者接口單元170是否與外部裝置耦接。感測(cè)單元140可以包括接近傳感器141將在下面結(jié)合觸摸屏來(lái)對(duì)此進(jìn)行描述。接口單元170用作至少一個(gè)外部裝置與移動(dòng)終端100連接可以通過(guò)的接口。例如,外部裝置可以包括有線或無(wú)線頭戴式耳機(jī)端口、外部電源(或電池充電器)端口、有線或無(wú)線數(shù)據(jù)端口、存儲(chǔ)卡端口、用于連接具有識(shí)別模塊的裝置的端口、音頻輸入/輸出(i/o)端口、視頻i/o端口、耳機(jī)端口等等。識(shí)別模塊可以是存儲(chǔ)用于驗(yàn)證用戶(hù)使用移動(dòng)終端100的各種信息并且可以包括用戶(hù)識(shí)別模塊(uim)、客戶(hù)識(shí)別模塊(sim)、通用客戶(hù)識(shí)別模塊(usim)等等。另外,具有識(shí)別模塊的裝置(下面稱(chēng)為"識(shí)別裝置")可以采取智能卡的形式,因此,識(shí)別裝置可以經(jīng)由端口或其它連接裝置與移動(dòng)終端100連接。接口單元170可以用于接收來(lái)自外部裝置的輸入(例如,數(shù)據(jù)信息、電力等等)并且將接收到的輸入傳輸?shù)揭苿?dòng)終端100內(nèi)的一個(gè)或多個(gè)元件或者可以用于在移動(dòng)終端和外部裝置之間傳輸數(shù)據(jù)。另外,當(dāng)移動(dòng)終端100與外部底座連接時(shí),接口單元170可以用作允許通過(guò)其將電力從底座提供到移動(dòng)終端100的路徑或者可以用作允許從底座輸入的各種命令信號(hào)通過(guò)其傳輸?shù)揭苿?dòng)終端的路徑。從底座輸入的各種命令信號(hào)或電力可以用作用于識(shí)別移動(dòng)終端是否準(zhǔn)確地安裝在底座上的信號(hào)。輸出單元150被構(gòu)造為以視覺(jué)、音頻和/或觸覺(jué)方式提供輸出信號(hào)(例如,音頻信號(hào)、視頻信號(hào)、警報(bào)信號(hào)、振動(dòng)信號(hào)等等)。輸出單元150可以包括顯示單元151、音頻輸出模塊152、警報(bào)單元153等等。顯示單元151可以顯示在移動(dòng)終端100中處理的信息。例如,當(dāng)移動(dòng)終端100處于電話(huà)通話(huà)模式時(shí),顯示單元151可以顯示與通話(huà)或其它通信(例如,文本消息收發(fā)、多媒體文件下載等等)相關(guān)的用戶(hù)界面(ui)或圖形用戶(hù)界面(gui)。當(dāng)移動(dòng)終端100處于視頻通話(huà)模式或者圖像捕獲模式時(shí),顯示單元151可以顯示捕獲的圖像和/或接收的圖像、示出視頻或圖像以及相關(guān)功能的ui或gui等等。同時(shí),當(dāng)顯示單元151和觸摸板以層的形式彼此疊加以形成觸摸屏?xí)r,顯示單元151可以用作輸入裝置和輸出裝置。顯示單元151可以包括液晶顯示器(lcd)、薄膜晶體管lcd(tft-lcd)、有機(jī)發(fā)光二極管(oled)顯示器、柔性顯示器、三維(3d)顯示器等等中的至少一種。這些顯示器中的一些可以被構(gòu)造為透明狀以允許用戶(hù)從外部觀看,這可以稱(chēng)為透明顯示器,典型的透明顯示器可以例如為toled(透明有機(jī)發(fā)光二極管)顯示器等等。根據(jù)特定想要的實(shí)施方式,移動(dòng)終端100可以包括兩個(gè)或更多顯示單元(或其它顯示裝置),例如,移動(dòng)終端可以包括外部顯示單元(未示出)和內(nèi)部顯示單元(未示出)。觸摸屏可用于檢測(cè)觸摸輸入壓力以及觸摸輸入位置和觸摸輸入面積。音頻輸出模塊152可以在移動(dòng)終端處于呼叫信號(hào)接收模式、通話(huà)模式、記錄模式、語(yǔ)音識(shí)別模式、廣播接收模式等等模式下時(shí),將無(wú)線通信單元110接收的或者在存儲(chǔ)器160中存儲(chǔ)的音頻數(shù)據(jù)轉(zhuǎn)換音頻信號(hào)并且輸出為聲音。而且,音頻輸出模塊152可以提供與移動(dòng)終端100執(zhí)行的特定功能相關(guān)的音頻輸出(例如,呼叫信號(hào)接收聲音、消息接收聲音等等)。音頻輸出模塊152可以包括揚(yáng)聲器、蜂鳴器等等。警報(bào)單元153可以提供輸出以將事件的發(fā)生通知給移動(dòng)終端100。典型的事件可以包括呼叫接收、消息接收、鍵信號(hào)輸入、觸摸輸入等等。除了音頻或視頻輸出之外,警報(bào)單元153可以以不同的方式提供輸出以通知事件的發(fā)生。例如,警報(bào)單元153可以以振動(dòng)的形式提供輸出,當(dāng)接收到呼叫、消息或一些其它進(jìn)入通信(incomingcommunication)時(shí),警報(bào)單元153可以提供觸覺(jué)輸出(例如,振動(dòng))以將其通知給用戶(hù)。通過(guò)提供這樣的觸覺(jué)輸出,即使在用戶(hù)的移動(dòng)電話(huà)處于用戶(hù)的口袋中時(shí),用戶(hù)也能夠識(shí)別出各種事件的發(fā)生。警報(bào)單元153也可以經(jīng)由顯示單元151或音頻輸出模塊152提供通知事件的發(fā)生的輸出。存儲(chǔ)器160可以存儲(chǔ)由控制器180執(zhí)行的處理和控制操作的軟件程序等等,或者可以暫時(shí)地存儲(chǔ)已經(jīng)輸出或?qū)⒁敵龅臄?shù)據(jù)(例如,電話(huà)簿、消息、靜態(tài)圖像、視頻等等)。而且,存儲(chǔ)器160可以存儲(chǔ)關(guān)于當(dāng)觸摸施加到觸摸屏?xí)r輸出的各種方式的振動(dòng)和音頻信號(hào)的數(shù)據(jù)。存儲(chǔ)器160可以包括至少一種類(lèi)型的存儲(chǔ)介質(zhì),所述存儲(chǔ)介質(zhì)包括閃存、硬盤(pán)、多媒體卡、卡型存儲(chǔ)器(例如,sd或dx存儲(chǔ)器等等)、隨機(jī)訪問(wèn)存儲(chǔ)器(ram)、靜態(tài)隨機(jī)訪問(wèn)存儲(chǔ)器(sram)、只讀存儲(chǔ)器(rom)、電可擦除可編程只讀存儲(chǔ)器(eeprom)、可編程只讀存儲(chǔ)器(prom)、磁性存儲(chǔ)器、磁盤(pán)、光盤(pán)等等。而且,移動(dòng)終端100可以與通過(guò)網(wǎng)絡(luò)連接執(zhí)行存儲(chǔ)器160的存儲(chǔ)功能的網(wǎng)絡(luò)存儲(chǔ)裝置協(xié)作??刂破?80通??刂埔苿?dòng)終端的總體操作。例如,控制器180執(zhí)行與語(yǔ)音通話(huà)、數(shù)據(jù)通信、視頻通話(huà)等等相關(guān)的控制和處理。另外,控制器180可以包括用于再現(xiàn)(或回放)多媒體數(shù)據(jù)的多媒體模塊181,多媒體模塊181可以構(gòu)造在控制器180內(nèi),或者可以構(gòu)造為與控制器180分離??刂破?80可以執(zhí)行模式識(shí)別處理,以將在觸摸屏上執(zhí)行的手寫(xiě)輸入或者圖片繪制輸入識(shí)別為字符或圖像。電源單元190在控制器180的控制下接收外部電力或內(nèi)部電力并且提供操作各元件和組件所需的適當(dāng)?shù)碾娏?。這里描述的各種實(shí)施方式可以以使用例如計(jì)算機(jī)軟件、硬件或其任何組合的計(jì)算機(jī)可讀介質(zhì)來(lái)實(shí)施。對(duì)于硬件實(shí)施,這里描述的實(shí)施方式可以通過(guò)使用特定用途集成電路(asic)、數(shù)字信號(hào)處理器(dsp)、數(shù)字信號(hào)處理裝置(dspd)、可編程邏輯裝置(pld)、現(xiàn)場(chǎng)可編程門(mén)陣列(fpga)、處理器、控制器、微控制器、微處理器、被設(shè)計(jì)為執(zhí)行這里描述的功能的電子單元中的至少一種來(lái)實(shí)施,在一些情況下,這樣的實(shí)施方式可以在控制器180中實(shí)施。對(duì)于軟件實(shí)施,諸如過(guò)程或功能的實(shí)施方式可以與允許執(zhí)行至少一種功能或操作的單獨(dú)的軟件模塊來(lái)實(shí)施。軟件代碼可以由以任何適當(dāng)?shù)木幊陶Z(yǔ)言編寫(xiě)的軟件應(yīng)用程序(或程序)來(lái)實(shí)施,軟件代碼可以存儲(chǔ)在存儲(chǔ)器160中并且由控制器180執(zhí)行。至此,已經(jīng)按照其功能描述了移動(dòng)終端。下面,為了簡(jiǎn)要起見(jiàn),將描述諸如折疊型、直板型、擺動(dòng)型、滑動(dòng)型移動(dòng)終端等等的各種類(lèi)型的移動(dòng)終端中的滑動(dòng)型移動(dòng)終端作為示例。因此,本發(fā)明能夠應(yīng)用于任何類(lèi)型的移動(dòng)終端,并且不限于滑動(dòng)型移動(dòng)終端。如圖1中所示的移動(dòng)終端100可以被構(gòu)造為利用經(jīng)由幀或分組發(fā)送數(shù)據(jù)的諸如有線和無(wú)線通信系統(tǒng)以及基于衛(wèi)星的通信系統(tǒng)來(lái)操作?,F(xiàn)在將參考圖2描述其中根據(jù)本發(fā)明的移動(dòng)終端能夠操作的通信系統(tǒng)。這樣的通信系統(tǒng)可以使用不同的空中接口和/或物理層。例如,由通信系統(tǒng)使用的空中接口包括例如頻分多址(fdma)、時(shí)分多址(tdma)、碼分多址(cdma)和通用移動(dòng)通信系統(tǒng)(umts)(特別地,長(zhǎng)期演進(jìn)(lte))、全球移動(dòng)通信系統(tǒng)(gsm)等等。作為非限制性示例,下面的描述涉及cdma通信系統(tǒng),但是這樣的教導(dǎo)同樣適用于其它類(lèi)型的系統(tǒng)。參考圖2,cdma無(wú)線通信系統(tǒng)可以包括多個(gè)移動(dòng)終端100、多個(gè)基站(bs)270、基站控制器(bsc)275和移動(dòng)交換中心(msc)280。msc280被構(gòu)造為與公共電話(huà)交換網(wǎng)絡(luò)(pstn)290形成接口。msc280還被構(gòu)造為與可以經(jīng)由回程線路耦接到基站270的bsc275形成接口?;爻叹€路可以根據(jù)若干已知的接口中的任一種來(lái)構(gòu)造,所述接口包括例如e1/t1、atm,ip、ppp、幀中繼、hdsl、adsl或xdsl。將理解的是,如圖2中所示的系統(tǒng)可以包括多個(gè)bsc275。每個(gè)bs270可以服務(wù)一個(gè)或多個(gè)分區(qū)(或區(qū)域),由多向天線或指向特定方向的天線覆蓋的每個(gè)分區(qū)放射狀地遠(yuǎn)離bs270?;蛘?,每個(gè)分區(qū)可以由用于分集接收的兩個(gè)或更多天線覆蓋。每個(gè)bs270可以被構(gòu)造為支持多個(gè)頻率分配,并且每個(gè)頻率分配具有特定頻譜(例如,1.25mhz,5mhz等等)。分區(qū)與頻率分配的交叉可以被稱(chēng)為cdma信道。bs270也可以被稱(chēng)為基站收發(fā)器子系統(tǒng)(bts)或者其它等效術(shù)語(yǔ)。在這樣的情況下,術(shù)語(yǔ)"基站"可以用于籠統(tǒng)地表示單個(gè)bsc275和至少一個(gè)bs270。基站也可以被稱(chēng)為"蜂窩站"?;蛘撸囟╞s270的各分區(qū)可以被稱(chēng)為多個(gè)蜂窩站。如圖2中所示,廣播發(fā)射器(bt)295將廣播信號(hào)發(fā)送給在系統(tǒng)內(nèi)操作的移動(dòng)終端100。如圖1中所示的廣播接收模塊111被設(shè)置在移動(dòng)終端100處以接收由bt295發(fā)送的廣播信號(hào)。在圖2中,示出了幾個(gè)全球定位系統(tǒng)(gps)衛(wèi)星300。衛(wèi)星300幫助定位多個(gè)移動(dòng)終端100中的至少一個(gè)。在圖2中,描繪了多個(gè)衛(wèi)星300,但是理解的是,可以利用任何數(shù)目的衛(wèi)星獲得有用的定位信息。如圖1中所示的gps的位置信息模塊115通常被構(gòu)造為與衛(wèi)星300配合以獲得想要的定位信息。替代gps跟蹤技術(shù)或者在gps跟蹤技術(shù)之外,可以使用可以跟蹤移動(dòng)終端的位置的其它技術(shù)。另外,至少一個(gè)gps衛(wèi)星300可以選擇性地或者額外地處理衛(wèi)星dmb傳輸。作為無(wú)線通信系統(tǒng)的一個(gè)典型操作,bs270接收來(lái)自各種移動(dòng)終端100的反向鏈路信號(hào)。移動(dòng)終端100通常參與通話(huà)、消息收發(fā)和其它類(lèi)型的通信。特定基站270接收的每個(gè)反向鏈路信號(hào)被在特定bs270內(nèi)進(jìn)行處理。獲得的數(shù)據(jù)被轉(zhuǎn)發(fā)給相關(guān)的bsc275。bsc提供通話(huà)資源分配和包括bs270之間的軟切換過(guò)程的協(xié)調(diào)的移動(dòng)管理功能。bsc275還將接收到的數(shù)據(jù)路由到msc280,其提供用于與pstn290形成接口的額外的路由服務(wù)。類(lèi)似地,pstn290與msc280形成接口,msc280與bsc275形成接口,并且bsc275相應(yīng)地控制bs270以將正向鏈路信號(hào)發(fā)送到移動(dòng)終端100?;谏鲜鲆苿?dòng)終端硬件結(jié)構(gòu)以及通信系統(tǒng),提出本發(fā)明方法各個(gè)實(shí)施例。實(shí)施例一圖3為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的方法實(shí)施例一的流程圖;如圖3所示,本發(fā)明實(shí)施例提供的處理線上服務(wù)器的log數(shù)據(jù)的方法可以包括如下步驟:步驟301:獲取線上服務(wù)器的日志log數(shù)據(jù)。在實(shí)際應(yīng)用中,可通過(guò)線上服務(wù)器的文件系統(tǒng)監(jiān)控機(jī)制inotify客戶(hù)端對(duì)線上服務(wù)器的log數(shù)據(jù)進(jìn)行實(shí)時(shí)監(jiān)控;然后,通過(guò)活動(dòng)消息隊(duì)列(activemessagequeue,activemq)系統(tǒng)獲取該inotify客戶(hù)端監(jiān)控到的線上服務(wù)器的實(shí)時(shí)log數(shù)據(jù)。步驟302:對(duì)所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行處理,得到處理后的log數(shù)據(jù)。在通過(guò)activemq系統(tǒng)獲取到線上服務(wù)器的log數(shù)據(jù)之后,通過(guò)分布式實(shí)時(shí)計(jì)算系統(tǒng)storm系統(tǒng)對(duì)獲取到的log數(shù)據(jù)進(jìn)行過(guò)濾,即刪除掉無(wú)用的log數(shù)據(jù)和有誤的log數(shù)據(jù),然后將該過(guò)濾后的log數(shù)據(jù)生成固定格式的log數(shù)據(jù),生成的該固定格式的log數(shù)據(jù)即為得到的處理后的log數(shù)據(jù)。其中,該固定格式的log數(shù)據(jù)的固定格式可以為:“時(shí)間+log級(jí)別+log所屬應(yīng)用模塊+log具體信息”。其中的“l(fā)og級(jí)別”可以是“告警(warn)”、“通知信息(info)”、“錯(cuò)誤(error)”等級(jí)別,“l(fā)og所屬應(yīng)用模塊”用來(lái)說(shuō)明該log數(shù)據(jù)是來(lái)自哪一個(gè)應(yīng)用的log數(shù)據(jù),比如,對(duì)于來(lái)自“天氣”應(yīng)用的log數(shù)據(jù),log所屬應(yīng)用模塊便為“天氣”。在將過(guò)濾后的log數(shù)據(jù)生成固定格式的log數(shù)據(jù)之后,還可以通過(guò)storm系統(tǒng)根據(jù)預(yù)設(shè)條件對(duì)該固定格式的log數(shù)據(jù)進(jìn)行合并,得到合并后的固定格式的log數(shù)據(jù),以減小數(shù)據(jù)庫(kù)的存儲(chǔ)量;其中的預(yù)設(shè)條件包括如下至少之一:預(yù)設(shè)時(shí)間間隔、log數(shù)據(jù)級(jí)別、log數(shù)據(jù)所屬的應(yīng)用。例如,將過(guò)濾后的log數(shù)據(jù)生成固定格式的log數(shù)據(jù)之后,可以通過(guò)storm系統(tǒng)對(duì)每隔t秒時(shí)間內(nèi)的固定格式的log數(shù)據(jù)進(jìn)行合并,得到合并后的固定格式的log數(shù)據(jù)。步驟303:將所述處理后的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引。在對(duì)線上服務(wù)器的log數(shù)據(jù)進(jìn)行處理,得到處理后的log數(shù)據(jù)之后,可以將該處理后的log數(shù)據(jù)使用分布式文件系統(tǒng)(hadoopdistributedfilesystem,hdfs)存儲(chǔ)到海杜普數(shù)據(jù)庫(kù)(hadoopdatabase,hbase)中的log數(shù)據(jù)表格table_log中,并對(duì)該處理后的log數(shù)據(jù)建立時(shí)間字段索引,以方便后續(xù)對(duì)log數(shù)據(jù)的查找。例如,可以直接調(diào)用建立索引命令對(duì)該處理后的log數(shù)據(jù)的時(shí)間字段按降序進(jìn)行就行索引,以保證最新的log數(shù)據(jù)最容易被查詢(xún)到。步驟304:通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的log數(shù)據(jù)從所述數(shù)據(jù)庫(kù)中呈現(xiàn)。在將處理后的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,并對(duì)該處理后的log數(shù)據(jù)建立時(shí)間字段索引之后,可以通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的log數(shù)據(jù)從數(shù)據(jù)庫(kù)中呈現(xiàn)出來(lái)。例如,將要查詢(xún)t1到t2時(shí)間范圍內(nèi)的log數(shù)據(jù),則可以通過(guò)log日志服務(wù)器從hbase數(shù)據(jù)庫(kù)中查詢(xún)t1到t2時(shí)間范圍內(nèi)的log數(shù)據(jù),然后將查詢(xún)到的該時(shí)間范圍內(nèi)的log數(shù)據(jù)呈現(xiàn)出來(lái);其中的log日志服務(wù)器是除線上服務(wù)器以外的其他互聯(lián)網(wǎng)(web)服務(wù)器。本發(fā)明實(shí)施例提供的處理線上服務(wù)器的log數(shù)據(jù)的方法,通過(guò)獲取線上服務(wù)器的log數(shù)據(jù),得到線上服務(wù)器的實(shí)時(shí)log數(shù)據(jù);然后對(duì)所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行處理,得到固定格式的log數(shù)據(jù),并將其確定為處理后的log數(shù)據(jù);再將所述處理后的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,以實(shí)現(xiàn)將線上服務(wù)器的實(shí)時(shí)log數(shù)據(jù)同步至除線上服務(wù)器以外的其他設(shè)備的目的;并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引,以方便后續(xù)對(duì)log數(shù)據(jù)的查找;最后通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的log數(shù)據(jù)從所述數(shù)據(jù)庫(kù)中呈現(xiàn);從而能夠使開(kāi)發(fā)人員實(shí)時(shí)獲取線上服務(wù)器的log數(shù)據(jù),進(jìn)而提高了線上服務(wù)器的修復(fù)進(jìn)度,提高了工作效率。實(shí)施例二圖4為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的方法實(shí)施例二的流程圖;如圖4所示,本發(fā)明實(shí)施例提供的處理線上服務(wù)器的log數(shù)據(jù)的方法可以包括如下步驟:步驟401:通過(guò)activemq系統(tǒng)獲取線上服務(wù)器的log數(shù)據(jù)。一般線上運(yùn)行的服務(wù)器,即線上服務(wù)器會(huì)產(chǎn)生大量有用的log數(shù)據(jù),用來(lái)記錄一些訪問(wèn)信息;inotify是一種文件系統(tǒng)的變化通知機(jī)制,能夠?qū)ξ募到y(tǒng)的操作進(jìn)行監(jiān)控,比如,能夠?qū)ξ募脑黾印h除、更改等事件進(jìn)行監(jiān)控。實(shí)際應(yīng)用中,可在線上服務(wù)器上運(yùn)行inotify客戶(hù)端來(lái)對(duì)線上服務(wù)器的log數(shù)據(jù)進(jìn)行實(shí)時(shí)監(jiān)控;當(dāng)線上服務(wù)器的log數(shù)據(jù)流動(dòng)增加時(shí),inotify會(huì)監(jiān)控到該變化,并將增加的log數(shù)據(jù)發(fā)送給activemq系統(tǒng);activemq系統(tǒng)將獲取到inotify客戶(hù)端監(jiān)控到的線上服務(wù)器的實(shí)時(shí)log數(shù)據(jù)。步驟402:通過(guò)storm系統(tǒng)對(duì)線上服務(wù)器的log數(shù)據(jù)進(jìn)行過(guò)濾處理,得到過(guò)濾后的log數(shù)據(jù)。storm系統(tǒng)是一個(gè)流式數(shù)據(jù)處理系統(tǒng),在activemq系統(tǒng)獲取到inotify客戶(hù)端監(jiān)控到的線上服務(wù)器的實(shí)時(shí)log數(shù)據(jù)之后,當(dāng)該log數(shù)據(jù)從activemq系統(tǒng)流入到storm系統(tǒng)時(shí),storm系統(tǒng)將會(huì)對(duì)log數(shù)據(jù)進(jìn)行過(guò)濾處理,即去除掉無(wú)用的log數(shù)據(jù)和有誤的log數(shù)據(jù),得到過(guò)濾后的log數(shù)據(jù)。步驟403:通過(guò)storm系統(tǒng)將過(guò)濾后的log數(shù)據(jù)生成固定格式的log數(shù)據(jù)。storm系統(tǒng)在將線上服務(wù)器的log數(shù)據(jù)進(jìn)行過(guò)濾處理,得到過(guò)濾后的log數(shù)據(jù)之后,將該過(guò)濾后的log數(shù)據(jù)生成固定格式的log數(shù)據(jù);其中,所生成的固定格式的log數(shù)據(jù)的固定格式可以為:“時(shí)間+log級(jí)別+log所屬應(yīng)用模塊+log具體信息”。該固定格式中的“時(shí)間”是線上服務(wù)器產(chǎn)生該log數(shù)據(jù)的時(shí)間,或者也可以說(shuō)是用戶(hù)的訪問(wèn)時(shí)間;“l(fā)og級(jí)別”可以是“告警(warn)”、“通知信息(info)”、“錯(cuò)誤(error)”等級(jí)別,即相當(dāng)于是該log數(shù)據(jù)的類(lèi)型;“l(fā)og所屬應(yīng)用模塊”代表該log數(shù)據(jù)是來(lái)自哪一個(gè)應(yīng)用的,比如,該log數(shù)據(jù)是在瀏覽新聞客戶(hù)端時(shí)產(chǎn)生的,則“l(fā)og所屬應(yīng)用模塊”將為“新聞客戶(hù)端”。步驟404:通過(guò)storm系統(tǒng)根據(jù)預(yù)設(shè)條件合并生成的固定格式的log數(shù)據(jù),得到合并后的固定格式的log數(shù)據(jù)。storm系統(tǒng)在將過(guò)濾后的log數(shù)據(jù)生成固定格式的log數(shù)據(jù)之后,可以根據(jù)預(yù)設(shè)條件將該固定格式的log數(shù)據(jù)進(jìn)行合并,得到合并后的固定格式的log數(shù)據(jù);其中的預(yù)設(shè)條件可以包括預(yù)設(shè)時(shí)間間隔、log數(shù)據(jù)級(jí)別、log數(shù)據(jù)所屬的應(yīng)用等中的至少一個(gè);比如,可以每隔預(yù)設(shè)時(shí)間間隔對(duì)該固定格式的log數(shù)據(jù)進(jìn)行合并,也可以每隔預(yù)設(shè)時(shí)間間隔對(duì)同一log數(shù)據(jù)級(jí)別,如同為“告警(warn)”的該固定格式的log數(shù)據(jù)進(jìn)行合并。例如,有如表1所示的固定格式的log數(shù)據(jù):表1對(duì)于表1中的固定格式的log數(shù)據(jù),可以對(duì)每隔30秒的數(shù)據(jù)進(jìn)行合并,得到合并后的固定格式的log數(shù)據(jù),其結(jié)果可以如表2所示:表2由表2可以看出,對(duì)表1中的固定格式的log數(shù)據(jù),將10:12:01-10:12:30這30秒內(nèi)的log數(shù)據(jù)合并到了一起,將10:12:31-10:13:00這30秒內(nèi)的log數(shù)據(jù)合并到了一起,將10:13:01-10:13:30這30秒內(nèi)的log數(shù)據(jù)合并到了一起,減小了數(shù)據(jù)庫(kù)的存儲(chǔ)量。對(duì)于表1中的固定格式的log數(shù)據(jù),也可以對(duì)每隔30秒的同一log級(jí)別的數(shù)據(jù)進(jìn)行合并,得到合并后的固定格式的log數(shù)據(jù),其結(jié)果可以如表3所示:表3由表3可以看出,對(duì)表1中的固定格式的log數(shù)據(jù),將10:12:01-10:12:30這30秒內(nèi)的同屬于info級(jí)別的log數(shù)據(jù)合并到了一起,同屬于warn級(jí)別的log數(shù)據(jù)合并到了一起;將10:12:31-10:13:00這30秒內(nèi)同屬于info級(jí)別的log數(shù)據(jù)合并到了一起;將10:13:00-10:13:30這30秒內(nèi)同屬于error級(jí)別的log數(shù)據(jù)合并到了一起;可以減小數(shù)據(jù)庫(kù)的存儲(chǔ)量。這里需要說(shuō)明的是,以上僅為舉例說(shuō)明,并非用于限定本發(fā)明。步驟405:將合并后的固定格式的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,并對(duì)合并后的固定格式的log數(shù)據(jù)建立時(shí)間字段索引。hbase數(shù)據(jù)庫(kù)是一個(gè)分布式的、面向列的開(kāi)源數(shù)據(jù)庫(kù),底層使用hdfs系統(tǒng)進(jìn)行數(shù)據(jù)的存儲(chǔ);在通過(guò)storm系統(tǒng)根據(jù)預(yù)設(shè)條件將生成的固定格式的log數(shù)據(jù)進(jìn)行合并,得到合并后的固定格式的log數(shù)據(jù)后,將合并后的固定格式的log數(shù)據(jù)使用hdfs系統(tǒng)存儲(chǔ)到hbase數(shù)據(jù)庫(kù)中的table_log表格中;在存儲(chǔ)該合并后的固定格式的log數(shù)據(jù)時(shí),對(duì)該合并后的固定格式的log數(shù)據(jù)建立時(shí)間字段索引,以便于后續(xù)對(duì)該合并后的固定格式的log數(shù)據(jù)的查找;比如,可以直接調(diào)用建立索引命令對(duì)合并后的固定格式的log數(shù)據(jù)的時(shí)間字段按降序就行索引,以保證最新的log數(shù)據(jù)最容易被查詢(xún)到。步驟406:通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的合并后的固定格式的log數(shù)據(jù)從數(shù)據(jù)庫(kù)中呈現(xiàn)。在將合并后的固定格式的log數(shù)據(jù)存儲(chǔ)到hbase數(shù)據(jù)庫(kù)中的table_log表格中,并對(duì)該合并后的固定格式的log數(shù)據(jù)的時(shí)間字段建立索引之后,可以通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的log數(shù)據(jù)從數(shù)據(jù)庫(kù)中呈現(xiàn)出來(lái);比如,將要查詢(xún)2016年12月23日10:10到10:30時(shí)間范圍內(nèi)的log數(shù)據(jù),則可以通過(guò)log日志服務(wù)器從hbase數(shù)據(jù)庫(kù)中查詢(xún)?cè)摃r(shí)間范圍內(nèi)的log數(shù)據(jù),然后將查詢(xún)到的該時(shí)間范圍內(nèi)的log數(shù)據(jù)呈現(xiàn)出來(lái);其中的log日志服務(wù)器是除線上服務(wù)器以外的其他web服務(wù)器。為了更加清楚地體現(xiàn)出本發(fā)明的目的,在上述實(shí)施例的基礎(chǔ)上作進(jìn)一步的舉例說(shuō)明。圖5為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的方法實(shí)施例二中處理線上服務(wù)器的log數(shù)據(jù)的架構(gòu)圖;如圖5所示,在線上服務(wù)器51(線上web服務(wù)器)上運(yùn)行inotify客戶(hù)端,當(dāng)線上服務(wù)器51的log數(shù)據(jù)流動(dòng)增加時(shí),可以利用inotify客戶(hù)端進(jìn)行監(jiān)控,將增加的log數(shù)據(jù)發(fā)送給activemq系統(tǒng);數(shù)據(jù)流入到activemq系統(tǒng)之后暫時(shí)存儲(chǔ)起來(lái),等待storm系統(tǒng)處理;storm系統(tǒng)將activemq系統(tǒng)流出的log數(shù)據(jù)進(jìn)行過(guò)濾,刪除掉無(wú)用的log數(shù)據(jù)和有誤的log數(shù)據(jù),然后生成格式可以為“時(shí)間+log級(jí)別+log所屬應(yīng)用模塊+log具體信息”的固定格式的log數(shù)據(jù),并將該固定格式的log數(shù)據(jù)存儲(chǔ)到hbase數(shù)據(jù)庫(kù)中的table_log表格中;在存儲(chǔ)該固定格式的log數(shù)據(jù)時(shí),對(duì)該固定格式的log數(shù)據(jù)的時(shí)間字段建立索引,比如,可直接調(diào)用建立索引命令對(duì)該log數(shù)據(jù)的時(shí)間字段按照降序就行索引,以便于后續(xù)對(duì)該log數(shù)據(jù)的查詢(xún),能夠保證最新的log數(shù)據(jù)最容易被查詢(xún)到;然后便可以通過(guò)log日志服務(wù)器52(除線上web服務(wù)器以外的其他web服務(wù)器)從hbase數(shù)據(jù)庫(kù)中獲取log數(shù)據(jù);如此,便實(shí)現(xiàn)了將線上服務(wù)器的實(shí)時(shí)log數(shù)據(jù)同步至除線上web服務(wù)器以外的其他web服務(wù)器上,這樣,開(kāi)發(fā)人員便可以實(shí)時(shí)通過(guò)頁(yè)面統(tǒng)一資源定位符(uniformresourcelocator,url)來(lái)獲取所需的log數(shù)據(jù)。在實(shí)際應(yīng)用中,生成固定格式的log數(shù)據(jù)之后,還可以對(duì)該固定格式的log數(shù)據(jù)進(jìn)行合并,比如,可以對(duì)每隔1分鐘之內(nèi)的log數(shù)據(jù)進(jìn)行合并,再將合并后的固定格式的log數(shù)據(jù)存儲(chǔ)到hbase數(shù)據(jù)庫(kù)中,以減小數(shù)據(jù)庫(kù)的存儲(chǔ)量。圖6為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的方法實(shí)施例二中通過(guò)頁(yè)面url獲取log數(shù)據(jù)的示意圖;如圖6所示,在瀏覽器實(shí)時(shí)log數(shù)據(jù)訪問(wèn)系統(tǒng)界面,用戶(hù)可以在時(shí)間范圍處輸入要查詢(xún)的log數(shù)據(jù)的時(shí)間段,比如,可以輸入查詢(xún)的開(kāi)始時(shí)間為2016-12-2310:01,結(jié)束時(shí)間為2016-12-2310:30,點(diǎn)擊“查詢(xún)”按鈕,這時(shí),log日志服務(wù)器將以輸入的時(shí)間作為參數(shù),從hbase數(shù)據(jù)庫(kù)中查詢(xún)?cè)摃r(shí)間段內(nèi)的log數(shù)據(jù),點(diǎn)擊“導(dǎo)出”按鈕便可以將查詢(xún)到的log數(shù)據(jù)下載到辦公軟件excel中;這樣,開(kāi)發(fā)人員便可以以log數(shù)據(jù)的時(shí)間作為參數(shù),實(shí)時(shí)通過(guò)頁(yè)面url來(lái)下載所需要的log數(shù)據(jù),非常方便,從而避免了因需要向運(yùn)維工程師索要log數(shù)據(jù)而延長(zhǎng)了修復(fù)線上服務(wù)器問(wèn)題的進(jìn)度的情況的出現(xiàn),進(jìn)而提高了工作效率。本發(fā)明實(shí)施例提供的處理線上服務(wù)器的log數(shù)據(jù)的方法,通過(guò)activemq系統(tǒng)獲取線上服務(wù)器的log數(shù)據(jù);通過(guò)storm系統(tǒng)對(duì)線上服務(wù)器的log數(shù)據(jù)進(jìn)行過(guò)濾處理,得到過(guò)濾后的log數(shù)據(jù);通過(guò)storm系統(tǒng)將過(guò)濾后的log數(shù)據(jù)生成固定格式的log數(shù)據(jù);通過(guò)storm系統(tǒng)根據(jù)預(yù)設(shè)條件合并生成的固定格式的log數(shù)據(jù),得到合并后的固定格式的log數(shù)據(jù);將合并后的固定格式的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,并對(duì)合并后的固定格式的log數(shù)據(jù)建立時(shí)間字段索引;通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的合并后的固定格式的log數(shù)據(jù)從數(shù)據(jù)庫(kù)中呈現(xiàn);能夠?qū)⒕€上服務(wù)器的實(shí)時(shí)log數(shù)據(jù)同步至除線上服務(wù)器以外的其他web服務(wù)器,這使得開(kāi)發(fā)人員可以以log數(shù)據(jù)的時(shí)間作為參數(shù),實(shí)時(shí)通過(guò)頁(yè)面url來(lái)下載所需要的log數(shù)據(jù),而不需要向運(yùn)維工程師索要log數(shù)據(jù),非常方便,從而提高了線上服務(wù)器的修復(fù)進(jìn)度,提高了工作效率。實(shí)施例三圖7為本發(fā)明處理線上服務(wù)器的log數(shù)據(jù)的裝置實(shí)施例的結(jié)構(gòu)示意圖;如圖7所示,本實(shí)施例提供的處理線上服務(wù)器的log數(shù)據(jù)的裝置07包括:獲取模塊71、處理模塊72、存儲(chǔ)模塊73、呈現(xiàn)模塊74;其中,所述獲取模塊71,用于獲取線上服務(wù)器的日志log數(shù)據(jù);所述處理模塊72,用于對(duì)所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行處理,得到處理后的log數(shù)據(jù);所述存儲(chǔ)模塊73,用于將所述處理后的log數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中,并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引;所述呈現(xiàn)模塊74,用于通過(guò)外部接口將查詢(xún)時(shí)間范圍內(nèi)的log數(shù)據(jù)從所述數(shù)據(jù)庫(kù)中呈現(xiàn)。進(jìn)一步的,所述獲取模塊71,具體用于通過(guò)活動(dòng)消息隊(duì)列activemq系統(tǒng)獲取所述線上服務(wù)器的log數(shù)據(jù),所述線上服務(wù)器的log數(shù)據(jù)是由所述線上服務(wù)器的文件系統(tǒng)監(jiān)控機(jī)制inotify客戶(hù)端監(jiān)控所述線上服務(wù)器得到的。進(jìn)一步的,所述處理模塊72,具體用于通過(guò)分布式實(shí)時(shí)計(jì)算系統(tǒng)storm系統(tǒng)將所述線上服務(wù)器的log數(shù)據(jù)進(jìn)行過(guò)濾,將過(guò)濾后的所述線上服務(wù)器的log數(shù)據(jù)生成固定格式的log數(shù)據(jù),將所述固定格式的log數(shù)據(jù)確定為所述處理后的log數(shù)據(jù);所述固定格式為時(shí)間+log級(jí)別+log所屬應(yīng)用模塊+log具體信息的格式。進(jìn)一步的,所述裝置07還包括:合并模塊75;其中,所述合并模塊75,用于通過(guò)所述storm系統(tǒng)根據(jù)預(yù)設(shè)條件合并所述固定格式的log數(shù)據(jù),得到合并后的固定格式的log數(shù)據(jù);所述預(yù)設(shè)條件包括如下至少之一:預(yù)設(shè)時(shí)間間隔、log數(shù)據(jù)級(jí)別、log數(shù)據(jù)所屬的應(yīng)用;所述處理模塊72,還具體用于將所述合并后的固定格式的log數(shù)據(jù)確定為所述處理后的log數(shù)據(jù)。進(jìn)一步的,所述存儲(chǔ)模塊73,具體用于將所述處理后的log數(shù)據(jù)使用分布式文件系統(tǒng)hdfs存儲(chǔ)到海杜普數(shù)據(jù)庫(kù)hbase數(shù)據(jù)庫(kù)的log數(shù)據(jù)表格table_log中,并對(duì)所述處理后的log數(shù)據(jù)建立時(shí)間字段索引。本實(shí)施例的裝置,可以用于執(zhí)行上述所示方法實(shí)施例的技術(shù)方案,其實(shí)現(xiàn)原理和技術(shù)效果類(lèi)似,此處不再贅述。在實(shí)際應(yīng)用中,所述獲取模塊71、處理模塊72、存儲(chǔ)模塊73、呈現(xiàn)模塊74、合并模塊75均可由位于處理線上服務(wù)器的log數(shù)據(jù)的裝置07中的中央處理器(centralprocessingunit,cpu)、微處理器(microprocessorunit,mpu)、數(shù)字信號(hào)處理器(digitalsignalprocessor,dsp)或現(xiàn)場(chǎng)可編程門(mén)陣列(fieldprogrammablegatearray,fpga)等實(shí)現(xiàn)。需要說(shuō)明的是,在本文中,術(shù)語(yǔ)“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過(guò)程、方法、物品或者裝置不僅包括那些要素,而且還包括沒(méi)有明確列出的其他要素,或者是還包括為這種過(guò)程、方法、物品或者裝置所固有的要素。在沒(méi)有更多限制的情況下,由語(yǔ)句“包括一個(gè)……”限定的要素,并不排除在包括該要素的過(guò)程、方法、物品或者裝置中還存在另外的相同要素。上述本發(fā)明實(shí)施例序號(hào)僅僅為了描述,不代表實(shí)施例的優(yōu)劣。通過(guò)以上的實(shí)施方式的描述,本領(lǐng)域的技術(shù)人員可以清楚地了解到上述實(shí)施例方法可借助軟件加必需的通用硬件平臺(tái)的方式來(lái)實(shí)現(xiàn),當(dāng)然也可以通過(guò)硬件,但很多情況下前者是更佳的實(shí)施方式。基于這樣的理解,本發(fā)明的技術(shù)方案本質(zhì)上或者說(shuō)對(duì)現(xiàn)有技術(shù)做出貢獻(xiàn)的部分可以以軟件產(chǎn)品的形式體現(xiàn)出來(lái),該計(jì)算機(jī)軟件產(chǎn)品存儲(chǔ)在一個(gè)存儲(chǔ)介質(zhì)(如rom/ram、磁碟、光盤(pán))中,包括若干指令用以使得一臺(tái)終端設(shè)備(可以是手機(jī),計(jì)算機(jī),服務(wù)器,空調(diào)器,或者網(wǎng)絡(luò)設(shè)備等)執(zhí)行本發(fā)明各個(gè)實(shí)施例所描述的方法。本發(fā)明是參照根據(jù)本發(fā)明實(shí)施例的方法、設(shè)備(系統(tǒng))、和計(jì)算機(jī)程序產(chǎn)品的流程圖和/或方框圖來(lái)描述的。應(yīng)理解可由計(jì)算機(jī)程序指令實(shí)現(xiàn)流程圖和/或方框圖中的每一流程和/或方框、以及流程圖和/或方框圖中的流程和/或方框的結(jié)合??商峁┻@些計(jì)算機(jī)程序指令到通用計(jì)算機(jī)、專(zhuān)用計(jì)算機(jī)、嵌入式處理機(jī)或其他可編程數(shù)據(jù)處理設(shè)備的處理器以產(chǎn)生一個(gè)機(jī)器,使得通過(guò)計(jì)算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備的處理器執(zhí)行的指令產(chǎn)生用于實(shí)現(xiàn)在流程圖一個(gè)流程或多個(gè)流程和/或方框圖一個(gè)方框或多個(gè)方框中指定的功能的裝置。這些計(jì)算機(jī)程序指令也可存儲(chǔ)在能引導(dǎo)計(jì)算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備以特定方式工作的計(jì)算機(jī)可讀存儲(chǔ)器中,使得存儲(chǔ)在該計(jì)算機(jī)可讀存儲(chǔ)器中的指令產(chǎn)生包括指令裝置的制造品,該指令裝置實(shí)現(xiàn)在流程圖一個(gè)流程或多個(gè)流程和/或方框圖一個(gè)方框或多個(gè)方框中指定的功能。這些計(jì)算機(jī)程序指令也可裝載到計(jì)算機(jī)或其他可編程數(shù)據(jù)處理設(shè)備上,使得在計(jì)算機(jī)或其他可編程設(shè)備上執(zhí)行一系列操作步驟以產(chǎn)生計(jì)算機(jī)實(shí)現(xiàn)的處理,從而在計(jì)算機(jī)或其他可編程設(shè)備上執(zhí)行的指令提供用于實(shí)現(xiàn)在流程圖一個(gè)流程或多個(gè)流程和/或方框圖一個(gè)方框或多個(gè)方框中指定的功能的步驟。以上僅為本發(fā)明的優(yōu)選實(shí)施例,并非因此限制本發(fā)明的專(zhuān)利范圍,凡是利用本發(fā)明說(shuō)明書(shū)及附圖內(nèi)容所作的等效結(jié)構(gòu)或等效流程變換,或直接或間接運(yùn)用在其他相關(guān)的
技術(shù)領(lǐng)域:
:,均同理包括在本發(fā)明的專(zhuān)利保護(hù)范圍內(nèi)。當(dāng)前第1頁(yè)12當(dāng)前第1頁(yè)12