技術(shù)編號(hào):6399636
提示:您尚未登錄,請(qǐng)點(diǎn) 登 陸 后下載,如果您還沒(méi)有賬戶請(qǐng)點(diǎn) 注 冊(cè) ,登陸完成后,請(qǐng)刷新本頁(yè)查看技術(shù)詳細(xì)信息。本申請(qǐng)涉及網(wǎng)絡(luò)信息處理,特別涉及一種網(wǎng)頁(yè)抓取周期調(diào)整方法和裝置。背景技術(shù)網(wǎng)絡(luò)爬蟲(chóng)是一個(gè)自動(dòng)提取網(wǎng)頁(yè)的程序,是搜索引擎的重要組成部分。通過(guò)網(wǎng)絡(luò)爬蟲(chóng)對(duì)網(wǎng)頁(yè)的網(wǎng)頁(yè)信息進(jìn)行抓取,并對(duì)抓取的網(wǎng)頁(yè)信息進(jìn)行分析,判斷該網(wǎng)頁(yè)中是否產(chǎn)生新的鏈接以確定該網(wǎng)頁(yè)中是否產(chǎn)生新的內(nèi)容頁(yè)(即鏈接所指向的實(shí)際頁(yè)面內(nèi)容),從而可以監(jiān)測(cè)到網(wǎng)頁(yè)的變化。一般情況下,網(wǎng)絡(luò)爬蟲(chóng)是按照目標(biāo)網(wǎng)頁(yè)的抓取周期,以固定的時(shí)間間隔來(lái)抓取該目標(biāo)網(wǎng)頁(yè)的網(wǎng)頁(yè)信息,但是如果網(wǎng)絡(luò)爬蟲(chóng)對(duì)該目標(biāo)網(wǎng)頁(yè)的抓取頻率過(guò)低,則很可能會(huì)...
注意:該技術(shù)已申請(qǐng)專利,請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識(shí)儲(chǔ)備,不適合論文引用。
請(qǐng)注意,此類技術(shù)沒(méi)有源代碼,用于學(xué)習(xí)研究技術(shù)思路。