網(wǎng)絡(luò)爬蟲或網(wǎng)絡(luò)蜘蛛
作者:紫色年華
瀏覽:1046次
發(fā)布時(shí)間:2017-10-09




網(wǎng)絡(luò)爬蟲或網(wǎng)絡(luò)蜘蛛(Web Crawler)也簡(jiǎn)稱為爬蟲或蜘蛛,代表搜索引擎在網(wǎng)路上進(jìn)行瀏覽,目的是發(fā)現(xiàn)新的鏈接和頁(yè)面,這是進(jìn)行索引的第一個(gè)環(huán)節(jié)。