尤物视频在线观看|国产尤物视频在线观看|99热在线获取最新地址,久久频这里精品99香蕉久,国产色婷婷精品综合在线,亚洲欧美日韩高清在线看

鏈接欺騙和百度真假蜘蛛

作者:草根香蕉皮 瀏覽:298 發(fā)布時(shí)間:2018-06-13
分享 評(píng)論 0

之前群里有朋友問(wèn)我什么是鏈接欺騙,小編今天就這個(gè)話題來(lái)給大家分享一下,并引申講解下什么是百度真假蜘蛛。

  首先是鏈接欺騙的原理。當(dāng)然這里說(shuō)的鏈接都是指友情鏈接。原理就是你和對(duì)方交換友鏈時(shí),看起來(lái)當(dāng)時(shí)雙方都有友鏈,但是過(guò)了一陣子卻發(fā)現(xiàn)你的友鏈掉了,其實(shí)這就是一種最簡(jiǎn)單的鏈接欺騙。還有一種較為隱蔽一點(diǎn)的,就是你在對(duì)方網(wǎng)站首頁(yè)包括百度快照里面都能看到,用愛(ài)站或站長(zhǎng)工具也能檢測(cè)出來(lái),但是當(dāng)我們?nèi)ズ笈_(tái)源碼里面查看的時(shí)候,卻發(fā)現(xiàn)href里面的那部分鏈接的并不是完成的首頁(yè)網(wǎng)址,而是域名后面加了?php=fdasf類似于這樣的字符串在里面,那樣的話也叫鏈接欺騙。

  接下來(lái)分析另一個(gè)話題,如何識(shí)別虛假百度蜘蛛?

  為什么會(huì)有虛假的百度蜘蛛呢?比如我們用愛(ài)站或者ChinaZ來(lái)模擬百度或者谷歌蜘蛛分析網(wǎng)頁(yè),那這種蜘蛛就是假的蜘蛛。還有一種就是通過(guò)程序來(lái)模擬,比如python腳本就可以模擬,那么如何識(shí)別呢?

  我們知道蜘蛛訪問(wèn)網(wǎng)站,后臺(tái)都有日志來(lái)記錄的,至此我們就可以通過(guò)網(wǎng)站訪問(wèn)日志,找出相應(yīng)的IP,但是一個(gè)一個(gè)去查找效率太低,這里推薦一款光年日志分析工具。它是由杭州光年信息技術(shù)有限公司開(kāi)發(fā)的一款網(wǎng)站日志分析軟件,可分析iis和apache等日志。

  當(dāng)我們找到異常IP以后,這時(shí)候怎么去查詢是不是百度蜘蛛的IP呢?我們需要用到Windows系統(tǒng)自帶的cmd命令,如圖,假如IP地址是117.136.45.119,這時(shí)候我們用nslookup命令,然后空格,再右擊粘貼IP地址,最后回車,就能看到具體的IP信息了。

  我們看到名稱顯示為中國(guó)移動(dòng)的地址,當(dāng)然這里我只是拿了自己手機(jī)IP舉了例子來(lái)說(shuō)明。還有人問(wèn)識(shí)別虛假百度蜘蛛有什么作用?

  第一我們可以用它來(lái)分析網(wǎng)站有沒(méi)有被收錄,看日志文件里面又有百度蜘蛛,此時(shí)就需要分析這些蜘蛛是真的還是假的。因?yàn)榘俣戎┲朐L問(wèn)具有階段性。

  第二,如果我們遇到了小偷程序采集自己的網(wǎng)站時(shí),就可以分析日志來(lái)判斷。通過(guò)網(wǎng)站訪問(wèn)日志,找出對(duì)方的IP,然后封鎖掉,小偷程序基本都在服務(wù)器上,所以ip相對(duì)是固定的。