很多人日思夜想，總也希望網(wǎng)站被編入索引庫，進(jìn)而獲取好的自然排名，總有些一朝“金榜題名”的意味。不過，網(wǎng)站建設(shè)完成后，并不是所有的網(wǎng)頁都想被顯示在SERP中的，甚至還想偷偷藏起來不被外面的人復(fù)用。倘若想要阻止某個(gè)網(wǎng)頁展示在SERP中，可以在網(wǎng)站建設(shè)期間，在代碼中添加noindex元標(biāo)記，或者在HTTP響應(yīng)中返回noindex標(biāo)頭，這樣利用noindex阻止搜索引擎將此頁面編入索引，對(duì)網(wǎng)站的排名更為有利。

noindex實(shí)施妙招

我們上面有講，noindex的實(shí)施妙招，其實(shí)無外乎兩種，一種是在網(wǎng)頁源代碼中添加noindex元標(biāo)記，另外一種便是在HTTP響應(yīng)中返回HTTP標(biāo)頭，從實(shí)施效果而言，兩種方法不分伯仲，使用時(shí)按照可以選擇是否適用自己網(wǎng)站便可。

添加noindex元標(biāo)記

• <meta name=”robots” content=”noindex”>，這能阻止大部分的搜索引擎抓取工具將你的網(wǎng)頁編入索引；
• <meta name=”googlebot” content=”noindex”>這個(gè)僅限于在谷歌使用，用于阻止Googlebot將網(wǎng)頁編入索引；
• <meta name=”bingbot” content=”noindex”>阻止bing的網(wǎng)絡(luò)爬蟲；
• <meta name=”baiduspider” content=”noindex”>阻止百度的蜘蛛。

值得注意的是，并不是所有的搜索引擎都能識(shí)別noindex的功效，不同的搜索引擎對(duì)詞有著不同的解讀、索引，盡管你在源碼中設(shè)置了noindex元標(biāo)記，但是你的網(wǎng)頁仍有可能出現(xiàn)在SERP中。

在HTTP響應(yīng)中返回HTTP標(biāo)頭

除了使用noindex元標(biāo)記以外，在HTTP響應(yīng)中返回一個(gè)值為 noindex 或 none 的 X-Robots-Tag 標(biāo)頭也不失為一個(gè)好方法。有的標(biāo)頭包含有 X-Robots-Tag，作為提示搜索引擎抓取工具，不要將某一網(wǎng)頁編入索引。

noindex小貼士

其實(shí)搜索引擎必須要抓取了你的網(wǎng)站才能看到noindex元標(biāo)記，所以在少數(shù)情況下，搜索引擎才會(huì)忽略你設(shè)置的noindex。如果你想要隱藏的網(wǎng)頁仍然顯示，那么很有可能是添加了noindex之后搜索引擎尚未進(jìn)行抓取。

假若想要讓你設(shè)置的noindex元標(biāo)記生效的話，那么在robot.txt文件中這個(gè)網(wǎng)頁是沒有被屏蔽的，而且網(wǎng)絡(luò)爬蟲是能訪問到的。如果這個(gè)網(wǎng)頁是被屏蔽掉的或者爬蟲是不能訪問到的，那么這個(gè)noindex元標(biāo)記是沒有辦法被識(shí)別的，那你的計(jì)謀就會(huì)落空了。

概括

noindex元標(biāo)記是谷歌發(fā)明的一個(gè)標(biāo)簽，最大的作用便是禁止該網(wǎng)頁被收錄索引，阻止搜索引擎顯示網(wǎng)站頁面在SERP上。很多時(shí)候我們?cè)谶M(jìn)行網(wǎng)站頁內(nèi)優(yōu)化時(shí)使用到，有利于網(wǎng)站的URL標(biāo)準(zhǔn)化。使用noindex阻止編入索引好處多多，可以防止分散網(wǎng)站權(quán)重，避免網(wǎng)站內(nèi)容重復(fù)，想要知曉更多妙用，不妨親自下場實(shí)踐吧。