網(wǎng)絡蜘蛛
作者:數(shù)風流人物
瀏覽:990次
發(fā)布時間:2018-05-22
編輯
分享
評論
贊0
網(wǎng)絡蜘蛛(Web Spider)又稱為:“網(wǎng)絡爬蟲”,“機器人”,簡稱“蜘蛛”。是通過網(wǎng)頁的鏈接地址來尋找網(wǎng)頁,從網(wǎng)站某一個頁面(通常是首頁)開始,讀取網(wǎng)頁的內(nèi)容,找到在網(wǎng)頁中的其它鏈接地址,然后通過這些鏈接地址尋找下一個網(wǎng)頁,這樣一直循環(huán)下去,直到把這個網(wǎng)站所有的網(wǎng)頁都抓取完為止。如果把整個互聯(lián)網(wǎng)當成一個網(wǎng)站,那么網(wǎng)絡蜘蛛就可以用這個原理把互聯(lián)網(wǎng)上所有的網(wǎng)頁都抓取下來。
猜你喜歡