noindex阻止编入索引

Ever

前端工程师 - Ever

2021年11月4日
noindex阻止编入索引

很多人日思夜想,总也希望网站被编入索引库,进而获取好的自然排名,总有些一朝“金榜题名”的意味。不过,网站建设完成后,并不是所有的网页都想被显示在SERP中的,甚至还想偷偷藏起来不被外面的人复用。倘若想要阻止某个网页展示在SERP中,可以在网站建设期间,在代码中添加noindex元标记,或者在HTTP响应中返回noindex标头,这样利用noindex阻止搜索引擎将此页面编入索引,对网站的排名更为有利。

noindex实施妙招

我们上面有讲,noindex的实施妙招,其实无外乎两种,一种是在网页源代码中添加noindex元标记,另外一种便是在HTTP响应中返回HTTP标头,从实施效果而言,两种方法不分伯仲,使用时按照可以选择是否适用自己网站便可。

添加noindex元标记

  • <meta name=”robots” content=”noindex”>,这能阻止大部分的搜索引擎抓取工具将你的网页编入索引;
  • <meta name=”googlebot” content=”noindex”>这个仅限于在谷歌使用,用于阻止Googlebot将网页编入索引;
  • <meta name=”bingbot” content=”noindex”>阻止bing的网络爬虫;
  • <meta name=”baiduspider” content=”noindex”>阻止百度的蜘蛛。

值得注意的是,并不是所有的搜索引擎都能识别noindex的功效,不同的搜索引擎对词有着不同的解读、索引,尽管你在源码中设置了noindex元标记,但是你的网页仍有可能出现在SERP中。

在HTTP响应中返回HTTP标头

除了使用noindex元标记以外,在HTTP响应中返回一个值为 noindex 或 none 的 X-Robots-Tag 标头也不失为一个好方法。有的标头包含有 X-Robots-Tag,作为提示搜索引擎抓取工具,不要将某一网页编入索引。

noindex小贴士

其实搜索引擎必须要抓取了你的网站才能看到noindex元标记,所以在少数情况下,搜索引擎才会忽略你设置的noindex。如果你想要隐藏的网页仍然显示,那么很有可能是添加了noindex之后搜索引擎尚未进行抓取。

假若想要让你设置的noindex元标记生效的话,那么在robot.txt文件中这个网页是没有被屏蔽的,而且网络爬虫是能访问到的。如果这个网页是被屏蔽掉的或者爬虫是不能访问到的,那么这个noindex元标记是没有办法被识别的,那你的计谋就会落空了。

概括

noindex元标记是谷歌发明的一个标签,最大的作用便是禁止该网页被收录索引,阻止搜索引擎显示网站页面在SERP上。很多时候我们在进行网站页内优化时使用到,有利于网站的URL标准化。使用noindex阻止编入索引好处多多,可以防止分散网站权重,避免网站内容重复,想要知晓更多妙用,不妨亲自下场实践吧。

原创文章归Sytech版权所有,转载请注明出处,商用请联系本站获取版权。

Ever

前端工程师 - Ever

Sytech科技前端工程师,专注于网络搭建和网站SEO优化多年,擅长于网站数据分析和海外网站运营、维护。

2022年10月28日

网站建设

为何Title Tag在谷歌SEO中有不可小觑的作用?

在谷歌SEO中,Title Tag是一个已知的、确定的、重要的排名因素。优化你的title Tag,是帮助你提高你的网页在谷歌上的搜索排名的最简单方法之一!

Jony

Zheng - Jony

了解更多

2022年7月3日

市场营销

谷歌SEO工具Lighthouse使用入门

谷歌SEO工具Lighthouse可以帮助你识别并改进网站的SEO问题,包括有关网站内容、代码和链接的信息,使你能够根据竞争情况调整自己的策略。

Ever

前端工程师 - Ever

了解更多

想要马上开始定制开发您的网站建设?

添加微信咨询 扫描二维码添加微信客服

微信二维码 微信客服

其它联系方式

Sytech科技电话

邮寄联系地址 广州市番禺区钟村街市广路钟2路段47号(厂房A)3楼304房 联系服务热线 020 8480 8073