noindex阻止编入索引

Ever

前端工程师 - Ever

2021年11月4日
noindex阻止编入索引

很多人日思夜想,总也希望网站被编入索引库,进而获取好的自然排名,总有些一朝“金榜题名”的意味。不过,网站建设完成后,并不是所有的网页都想被显示在SERP中的,甚至还想偷偷藏起来不被外面的人复用。倘若想要阻止某个网页展示在SERP中,可以在网站建设期间,在代码中添加noindex元标记,或者在HTTP响应中返回noindex标头,这样利用noindex阻止搜索引擎将此页面编入索引,对网站的排名更为有利。

noindex实施妙招

我们上面有讲,noindex的实施妙招,其实无外乎两种,一种是在网页源代码中添加noindex元标记,另外一种便是在HTTP响应中返回HTTP标头,从实施效果而言,两种方法不分伯仲,使用时按照可以选择是否适用自己网站便可。

添加noindex元标记

  • <meta name=”robots” content=”noindex”>,这能阻止大部分的搜索引擎抓取工具将你的网页编入索引;
  • <meta name=”googlebot” content=”noindex”>这个仅限于在谷歌使用,用于阻止Googlebot将网页编入索引;
  • <meta name=”bingbot” content=”noindex”>阻止bing的网络爬虫;
  • <meta name=”baiduspider” content=”noindex”>阻止百度的蜘蛛。

值得注意的是,并不是所有的搜索引擎都能识别noindex的功效,不同的搜索引擎对词有着不同的解读、索引,尽管你在源码中设置了noindex元标记,但是你的网页仍有可能出现在SERP中。

在HTTP响应中返回HTTP标头

除了使用noindex元标记以外,在HTTP响应中返回一个值为 noindex 或 none 的 X-Robots-Tag 标头也不失为一个好方法。有的标头包含有 X-Robots-Tag,作为提示搜索引擎抓取工具,不要将某一网页编入索引。

noindex小贴士

其实搜索引擎必须要抓取了你的网站才能看到noindex元标记,所以在少数情况下,搜索引擎才会忽略你设置的noindex。如果你想要隐藏的网页仍然显示,那么很有可能是添加了noindex之后搜索引擎尚未进行抓取。

假若想要让你设置的noindex元标记生效的话,那么在robot.txt文件中这个网页是没有被屏蔽的,而且网络爬虫是能访问到的。如果这个网页是被屏蔽掉的或者爬虫是不能访问到的,那么这个noindex元标记是没有办法被识别的,那你的计谋就会落空了。

概括

noindex元标记是谷歌发明的一个标签,最大的作用便是禁止该网页被收录索引,阻止搜索引擎显示网站页面在SERP上。很多时候我们在进行网站页内优化时使用到,有利于网站的URL标准化。使用noindex阻止编入索引好处多多,可以防止分散网站权重,避免网站内容重复,想要知晓更多妙用,不妨亲自下场实践吧。

原创文章归Sytech版权所有,转载请注明出处,商用请联系本站获取版权。

Ever

前端工程师 - Ever

Sytech科技前端工程师,专注于网络搭建和网站SEO优化多年,擅长于网站数据分析和海外网站运营、维护。

2023年4月30日

市场营销

再谈什么是SEO

每个阶段SEO都有不同的挑战,面对人工智能浪潮的来袭,SEO工作如何才能够合理有序融入新时代?Sytech运营官结合电商技术公司算法调整谈谈......

Donald

BlackOffer董事会主席 - Donald

了解更多

2023年4月11日

市场营销

搜索引擎优化-网站SEO小贴士

电商网站如何做到SEO友好?我们在做搜索引擎优化的时候应该有什么注意事项?本文以谷歌算法为例,提供了13个优化经验点,协助你长期持续优化!

Zoao

前端工程师 - Zoao

了解更多

想要马上开始定制开发您的网站建设?

添加微信咨询 扫描二维码添加微信客服

微信二维码 微信客服

其它联系方式

Sytech科技电话

邮寄联系地址 广州市番禺区钟村街市广路钟2路段47号(厂房A)3楼304房 联系服务热线 020 8480 8073