技術(shù)編號：12363793
提示：您尚未登錄，請點 登 陸 后下載，如果您還沒有賬戶請點 注 冊 ，登陸完成后，請刷新本頁查看技術(shù)詳細信息。本申請涉及計算機應用領(lǐng)域，特別是涉及實現(xiàn)網(wǎng)絡(luò)爬蟲抓取網(wǎng)頁的方法和裝置。背景技術(shù)網(wǎng)絡(luò)爬蟲，又被稱為網(wǎng)頁蜘蛛或網(wǎng)絡(luò)機器人，是一種按照既定規(guī)則自動抓取萬維網(wǎng)網(wǎng)頁的信息的程序或腳本。對于網(wǎng)絡(luò)爬蟲來說，其核心目標就是快速、準確地抓取源網(wǎng)頁中的各類信息。在實際運行過程中，由于網(wǎng)絡(luò)爬蟲每一次抓取行為都是模擬用戶的真實訪問請求，因而網(wǎng)絡(luò)爬蟲的抓取行為會對源網(wǎng)頁所在的服務(wù)器產(chǎn)生訪問壓力。如果抓取頻率過高，就有可能導致相應的服務(wù)器的響應時間過長，甚至于內(nèi)部出現(xiàn)錯誤，最終使抓取成功率降低。因此，在現(xiàn)有技術(shù)中，當批量抓...
注意：該技術(shù)已申請專利，請尊重研發(fā)人員的辛勤研發(fā)付出，在未取得專利權(quán)人授權(quán)前，僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán)，增加技術(shù)思路，做技術(shù)知識儲備，不適合論文引用。
請注意，此類技術(shù)沒有源代碼，用于學習研究技術(shù)思路。