noindex阻止编入索引

Ever

前端工程师 - Ever

2021年11月4日
noindex阻止编入索引

很多人日思夜想,总也希望网站被编入索引库,进而获取好的自然排名,总有些一朝“金榜题名”的意味。不过,网站建设完成后,并不是所有的网页都想被显示在SERP中的,甚至还想偷偷藏起来不被外面的人复用。倘若想要阻止某个网页展示在SERP中,可以在网站建设期间,在代码中添加noindex元标记,或者在HTTP响应中返回noindex标头,这样利用noindex阻止搜索引擎将此页面编入索引,对网站的排名更为有利。

noindex实施妙招

我们上面有讲,noindex的实施妙招,其实无外乎两种,一种是在网页源代码中添加noindex元标记,另外一种便是在HTTP响应中返回HTTP标头,从实施效果而言,两种方法不分伯仲,使用时按照可以选择是否适用自己网站便可。

添加noindex元标记

  • <meta name=”robots” content=”noindex”>,这能阻止大部分的搜索引擎抓取工具将你的网页编入索引;
  • <meta name=”googlebot” content=”noindex”>这个仅限于在谷歌使用,用于阻止Googlebot将网页编入索引;
  • <meta name=”bingbot” content=”noindex”>阻止bing的网络爬虫;
  • <meta name=”baiduspider” content=”noindex”>阻止百度的蜘蛛。

值得注意的是,并不是所有的搜索引擎都能识别noindex的功效,不同的搜索引擎对词有着不同的解读、索引,尽管你在源码中设置了noindex元标记,但是你的网页仍有可能出现在SERP中。

在HTTP响应中返回HTTP标头

除了使用noindex元标记以外,在HTTP响应中返回一个值为 noindex 或 none 的 X-Robots-Tag 标头也不失为一个好方法。有的标头包含有 X-Robots-Tag,作为提示搜索引擎抓取工具,不要将某一网页编入索引。

noindex小贴士

其实搜索引擎必须要抓取了你的网站才能看到noindex元标记,所以在少数情况下,搜索引擎才会忽略你设置的noindex。如果你想要隐藏的网页仍然显示,那么很有可能是添加了noindex之后搜索引擎尚未进行抓取。

假若想要让你设置的noindex元标记生效的话,那么在robot.txt文件中这个网页是没有被屏蔽的,而且网络爬虫是能访问到的。如果这个网页是被屏蔽掉的或者爬虫是不能访问到的,那么这个noindex元标记是没有办法被识别的,那你的计谋就会落空了。

概括

noindex元标记是谷歌发明的一个标签,最大的作用便是禁止该网页被收录索引,阻止搜索引擎显示网站页面在SERP上。很多时候我们在进行网站页内优化时使用到,有利于网站的URL标准化。使用noindex阻止编入索引好处多多,可以防止分散网站权重,避免网站内容重复,想要知晓更多妙用,不妨亲自下场实践吧。

原创文章归Sytech版权所有,转载请注明出处,商用请联系本站获取版权。

Ever

前端工程师 - Ever

Sytech科技前端工程师,专注于网络搭建和网站SEO优化多年,擅长于网站数据分析和海外网站运营、维护。

2023年6月5日

市场营销

再谈网站建设的数据分析

你是否也面对过,季节性产品没有及时调整而导致的经济损失?每位电子商务运营都需要经历数据收集、整理和分析的过程,我们站在网站建设的角度该如何?

Ever

前端工程师 - Ever

了解更多

2023年4月13日

市场营销

网站建设背后的数据抓取和分析

跨境电商转战独立站,网站建设之后需要如何实施和确保营销方向不出错?数据分析是关键,数据抓取和分析方法概览!

Ever

前端工程师 - Ever

了解更多

想要马上开始定制开发您的网站建设?

添加微信咨询 扫描二维码添加微信客服

微信二维码 微信客服

其它联系方式

Sytech科技电话

邮寄联系地址 广州市番禺区钟村街道长华创意谷18栋8~9号 联系服务热线 020 8480 8073