noindex標(biāo)簽是什么?詳解noindex標(biāo)簽的正確使用方法以及對SEO的影響
一、什么是noindex標(biāo)簽
noindex是谷歌發(fā)明的一個Html標(biāo)簽,其作用是向搜索引擎聲明該網(wǎng)頁禁止被索引收錄,搜索蜘蛛看到Noindex后不會對網(wǎng)頁進(jìn)行索引,因此在搜索引擎上不會出現(xiàn)標(biāo)有noindex的網(wǎng)頁。網(wǎng)頁開發(fā)者不希望被搜索引擎索引的原因包括網(wǎng)頁正在開發(fā)、網(wǎng)頁所有者希望網(wǎng)頁保持私密性等。
二、noindex標(biāo)簽的正確使用方法
1、<meta> 標(biāo)記使用noindex標(biāo)簽
若想阻止大部分搜索引擎網(wǎng)頁抓取工具將您網(wǎng)站中的某個網(wǎng)頁編入索引,請將以下元標(biāo)記放入該網(wǎng)頁的 <head> 部分中:
<meta name="robots" content="noindex">
表示屏蔽所有蜘蛛爬蟲抓取該頁面。
*meta標(biāo)記中noindex標(biāo)簽的使用方法
請注意,某些搜索引擎網(wǎng)頁抓取工具對 noindex 標(biāo)簽可能會有不同的解讀。因此,您的網(wǎng)頁可能仍會出現(xiàn)在其他搜索引擎的結(jié)果中。
大量SEOer在使用noindex 標(biāo)簽的時候,經(jīng)常會采用以下的拓展:
(1)、content='noindex,follow'
表示:該頁面禁止被索引,但頁面中的其他的URL,支持爬蟲進(jìn)行抓取與收錄。
(2)、content='noindex,nofollow'
表示:該頁面禁止索引,以及頁面中所有的URL,都禁止被抓取。
如想阻止某個搜索引擎抓取頁面,還可以使用以下方法:
(3)、<meta name="Baiduspider" content="noindex">
表示要阻止 baidu 網(wǎng)頁抓取工具將網(wǎng)頁編入索引,請放入以下元標(biāo)記。
(4)、<meta name="googlebot" content="noindex">
表示要阻止 Google 網(wǎng)頁抓取工具將網(wǎng)頁編入索引,請放入以下元標(biāo)記。
2、HTTP 響應(yīng)標(biāo)頭使用noindex
除了使用元標(biāo)記,您還可在響應(yīng)中返回一個值為 noindex 或 none 的 X-Robots-Tag 標(biāo)頭。響應(yīng)標(biāo)頭可用于非 HTML 資源,例如 PDF、視頻文件和圖片文件。下面是一個 HTTP 響應(yīng)示例,它含有一個 X-Robots-Tag,用來指示抓取工具不要將某一網(wǎng)頁編入索引:
HTTP/1.1 200 OK
X-Robots-Tag: noindex
*HTTP響應(yīng)標(biāo)頭中noindex標(biāo)簽的使用方法
三、noindex標(biāo)簽使用場景
對于Noindex標(biāo)簽,在以下幾種情況下頁面使用的比較常見:
1、網(wǎng)站的活動促銷、信息填報頁面,并不需要特定關(guān)鍵詞排名。
2、網(wǎng)站日常公共頁面,如:關(guān)于我們、聯(lián)系我們、會員注冊注冊頁面。
3、提示性質(zhì)頁面,如:404頁面錯誤頁面。
4、特定的開源程序插件,比如:WordPress SEO的插件。
四、noindex標(biāo)簽對SEO的影響
反向鏈接即外鏈?zhǔn)撬阉饕娼o網(wǎng)站排名的一個重要因素。為了添加反向鏈接,SEO作弊者會在論壇和博客等大量發(fā)布帶無關(guān)鏈接的內(nèi)容。這些垃圾鏈接的存在給搜 索引擎對網(wǎng)頁質(zhì)量的評估造成一定程度的麻煩,可以說noindex是一個非常好的"垃圾鏈接防火墻"。正是百度、谷歌為了應(yīng)對垃圾鏈接(Spam)引入的一個屬性,此屬性應(yīng)該被廣泛采用。
noindex標(biāo)簽對SEO的影響有兩方面,一是不給鏈接投票,增加此鏈接的權(quán)重,二是使添加noindex的部分內(nèi)容不參與網(wǎng)站排名,便于集中網(wǎng)站權(quán)重。
五、noindex與nofollow的區(qū)別
對于SEO新人而言,經(jīng)常有SEO人員,容易將兩個SEO標(biāo)簽混淆,實(shí)際上這里還是有本質(zhì)的區(qū)別的,其中,最核心的區(qū)別就是:
1、noindex標(biāo)簽,理論上是嚴(yán)格禁止被搜索引擎收錄、展現(xiàn)在搜索結(jié)果中的。但是noindex標(biāo)簽必須是搜索引擎抓取網(wǎng)頁的時候,才能看到元標(biāo)記和 HTTP 標(biāo)頭。如果某個網(wǎng)頁仍顯示在搜索結(jié)果中,可能是因?yàn)樵谔砑訕?biāo)記后搜索引擎尚未抓取過該網(wǎng)頁,這種情況可以使用網(wǎng)址檢查工具請求搜索引擎重新抓取您的網(wǎng)頁。
2、nofollow標(biāo)簽,通常主要表述在某個特定頁面上的URL,是禁止被百度爬蟲抓取的,不傳遞權(quán)重,并不會影響鏈接所指頁面的收錄。
點(diǎn)擊了解" nofollow標(biāo)簽"的詳細(xì)知識。
六、noindex與robts.txt文件
noindex標(biāo)簽是禁止頁面被搜索引擎索引,與在根目錄中使用nobots.txt文件,禁止某個特定頁面抓取是有異曲同工之處的。如果noindex標(biāo)簽在頁面時候后未被搜索引擎發(fā)現(xiàn),可使用robots.txt文件阻止搜索引擎抓取該網(wǎng)址,robots.txt文件是搜索蜘蛛抓取頁面最先訪問的文件,時效性更高。
總結(jié)
優(yōu)化猩SEO:為讓 noindex 標(biāo)簽生效,網(wǎng)頁或資源不得被 robots.txt 文件屏蔽,并且必須能被抓取工具訪問。如果該網(wǎng)頁被 robots.txt 文件屏蔽或抓取工具無法訪問該網(wǎng)頁,那么抓取工具將永遠(yuǎn)無法看到 noindex標(biāo)簽,因此該網(wǎng)頁可能仍會顯示在搜索結(jié)果中。
參考資料:
noindex_百度百科
https://baike.baidu.com/item/noindex/8887473
使用"noindex"阻止搜索引擎編入索引 _ Google 搜索中心
https://developers.google.com/search/docs/advanced/crawling/block-indexing?hl=zh-cn
修改于2023-05-26
想了解更多SEO百科的內(nèi)容,請訪問:SEO百科