Robots協(xié)議-Robots Meta標(biāo)簽




Robots協(xié)議-Robots Meta標(biāo)簽
Robots.txt文件主要是限制整個(gè)站點(diǎn)或者目錄的搜索引擎訪問(wèn)情況,而Robots Meta標(biāo)簽則主要是針對(duì)一個(gè)個(gè)具體的頁(yè)面。和其他的meta標(biāo)簽(如使用的語(yǔ)言、頁(yè)面的描述、關(guān)鍵詞等)一樣,Robots Meta標(biāo)簽也是放在頁(yè)面中,專門用來(lái)告訴搜索引擎ROBOTS如何抓取該頁(yè)的內(nèi)容。
Robots Meta標(biāo)簽中沒(méi)有大小寫之分,name=“Robots”表示所有的搜索引擎,可以針對(duì)某個(gè)具體搜索引擎寫為name=“BaiduSpider”。content部分有四個(gè)指令選項(xiàng):index、noindex、follow、nofollow,指令間以“,”分隔。
index指令告訴搜索機(jī)器人抓取該頁(yè)面;
follow指令表示搜索機(jī)器人可以沿著該頁(yè)面上的鏈接繼續(xù)抓取下去;
Robots Meta標(biāo)簽的缺省值是index和follow,只有inktomi除外,對(duì)于它,缺省值是index、nofollow。
禁止搜索引擎跟蹤網(wǎng)頁(yè)的鏈接,而只對(duì)網(wǎng)頁(yè)建索引
如果您不想搜索引擎追蹤此網(wǎng)頁(yè)上的鏈接,且不傳遞鏈接的權(quán)重,請(qǐng)將此元標(biāo)記置入網(wǎng)頁(yè)的 <HEAD> 部分:
<meta name=“robots” content=“nofollow”>
如果您不想百度追蹤某一條特定鏈接,百度還支持更精確的控制,請(qǐng)將此標(biāo)記直接寫在某條鏈接上:
<a href=“signin.php” rel=“nofollow”>sign in</a>
要允許其他搜索引擎跟蹤,但僅防止百度跟蹤您網(wǎng)頁(yè)的鏈接,請(qǐng)將此元標(biāo)記置入網(wǎng)頁(yè)的<HEAD> 部分:
<meta name=“Baiduspider” content=“nofollow”>
禁止搜索引擎跟蹤網(wǎng)頁(yè)的鏈接,而只對(duì)網(wǎng)頁(yè)建索引
如果您不想搜索引擎追蹤此網(wǎng)頁(yè)上的鏈接,且不傳遞鏈接的權(quán)重,請(qǐng)將此元標(biāo)記置入網(wǎng)頁(yè)的 <HEAD> 部分:
<meta name=“robots” content=“nofollow”>
如果您不想百度追蹤某一條特定鏈接,百度還支持更精確的控制,請(qǐng)將此標(biāo)記直接寫在某條鏈接上:
<a href=“signin.php” rel=“nofollow”>sign in</a>
要允許其他搜索引擎跟蹤,但僅防止百度跟蹤您網(wǎng)頁(yè)的鏈接,請(qǐng)將此元標(biāo)記置入網(wǎng)頁(yè)的<HEAD> 部分:
<meta name=“Baiduspider” content=“nofollow”>