技術(shù)編號(hào)：11864872
提示：您尚未登錄，請(qǐng)點(diǎn) 登 陸 后下載，如果您還沒(méi)有賬戶(hù)請(qǐng)點(diǎn) 注 冊(cè) ，登陸完成后，請(qǐng)刷新本頁(yè)查看技術(shù)詳細(xì)信息。本發(fā)明涉及網(wǎng)絡(luò)信息搜索領(lǐng)域，特別涉及一種數(shù)據(jù)爬取方法及裝置。背景技術(shù)隨著網(wǎng)絡(luò)的迅速發(fā)展，萬(wàn)維網(wǎng)成為海量信息的載體，人們通過(guò)搜索工具在這些海量數(shù)據(jù)中進(jìn)行檢索。搜索工具返回的結(jié)果含有大量用戶(hù)不關(guān)心的數(shù)據(jù)，在這些數(shù)據(jù)中去搜索用戶(hù)關(guān)心的數(shù)據(jù)成為一個(gè)難題。在這種情況下定向抓取相關(guān)網(wǎng)頁(yè)資源的爬蟲(chóng)系統(tǒng)應(yīng)運(yùn)而生，可以根據(jù)既定的抓取目標(biāo)，有選擇的在萬(wàn)維網(wǎng)的網(wǎng)頁(yè)或鏈接上獲取所需要的數(shù)據(jù)信息?，F(xiàn)有的爬蟲(chóng)系統(tǒng)在爬取微博或者視頻數(shù)據(jù)時(shí)，通常采用的方式有基于搜索關(guān)鍵詞、列表頁(yè)的爬取。在進(jìn)行搜索關(guān)鍵詞爬取時(shí)，主要步驟有調(diào)用爬...
注意：該技術(shù)已申請(qǐng)專(zhuān)利，請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出，在未取得專(zhuān)利權(quán)人授權(quán)前，僅供技術(shù)研究參考不得用于商業(yè)用途。
該專(zhuān)利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán)，增加技術(shù)思路，做技術(shù)知識(shí)儲(chǔ)備，不適合論文引用。
請(qǐng)注意，此類(lèi)技術(shù)沒(méi)有源代碼，用于學(xué)習(xí)研究技術(shù)思路。