技術編號:9597974
提示:您尚未登錄,請點 登 陸 后下載,如果您還沒有賬戶請點 注 冊 ,登陸完成后,請刷新本頁查看技術詳細信息。網(wǎng)絡爬蟲,是一種按照一定的規(guī)則,自動地抓取萬維網(wǎng)信息的程序或者腳本。網(wǎng)絡爬蟲一般駐留在服務器上,通過給定的一些URL (Uniform Resource Locator,統(tǒng)一資源定位符),利用HTTP (Hyper Text Transfer Protocol,超文本傳輸協(xié)議)等標準協(xié)議讀取相應文檔,然后以文檔中包括的所有未訪問過的URL作為新的起點,繼續(xù)進行漫游,直到?jīng)]有滿足條件的新URL為止。然而,由于網(wǎng)絡爬蟲排除標準協(xié)議(Robots Exclus1...
注意:該技術已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權人授權前,僅供技術研究參考不得用于商業(yè)用途。
該專利適合技術人員進行技術研發(fā)參考以及查看自身技術是否侵權,增加技術思路,做技術知識儲備,不適合論文引用。
請注意,此類技術沒有源代碼,用于學習研究技術思路。