海外翻墙免费加速器:[入口]
若想阻止某个网页出现在 Google 搜索结果中,您可以在该网页的 HTML 代码中添加 noindex 元标记,或在 HTTP 响应中返回 noindex 标头。
当 Googlebot 下次抓取该网页并发现该标记或标头时,就会完全阻止该网页出现在 Google 搜索结果中,不论是否有其他网站链接到该网页。
重要提示:
为让 noindex 指令生效,网页不得被 robots.txt 文件屏蔽,并且必须能被抓取工具访问。
如果该网页被 robots.txt 文件屏蔽或抓取工具无法访问该网页,那么抓取工具将永远无法看到 noindex 指令,因此该网页可能仍会显示在搜索结果中,例如,如果有其他网页链接到该网页的话。
如果您不具备对服务器的根访问权限,可借助非常实用的 noindex 控制对您网站中各个网页的访问权限。
实施 noindex
实施 noindex 的方法有两种:将其作为元标记实施,或作为 HTTP 响应标头实施。这两种方法的效果相同,从中选择更方便您网站采用的那一种方法即可。
<meta> 标记
若想阻止大部分搜索引擎网页抓取工具将您网站中的某个网页编入索引,请将以下元标记放入该网页的 <head> 部分中:
<meta name="robots" content="noindex">
若想仅阻止 Google 网页抓取工具将网页编入索引,请使用以下元标记:
<meta name="googlebot" content="noindex">
请注意,某些搜索引擎网页抓取工具对 noindex
指令可能会有不同的解读。因此,您的网页可能仍会出现在其他搜索引擎的结果中。
HTTP 响应标头
除了使用元标记,您还可在响应中返回一个值为 noindex
或 none
的 X-Robots-Tag
标头。下面是一个 HTTP 响应示例,它含有一个 X-Robots-Tag
,用来指示抓取工具不要将某一网页编入索引:
HTTP/1.1 200 OK (…) X-Robots-Tag: noindex (…)
帮助我们发现您的元标记
我们必须抓取您的网页,才能看到元标记和 HTTP 标头。
如果某个网页仍显示在搜索结果中,可能是因为在您添加标记后我们尚未抓取过该网页。
您可以使用网址检查工具请求 Google 重新抓取您的网页。此外,也可能是因为 robots.txt 文件阻止 Google 网页抓取工具访问该网址,因此这些抓取工具无法发现此标记。
若要允许 Google 访问您的网页,您必须修改 robots.txt 文件。您可以使用 robots.txt 测试工具修改和测试 robots.txt。
谷歌优化工具
网址检查工具:https://support.google.com/webmasters/answer/9012289?hl=zh-Hans
robots.txt 测试工具:https://support.google.com/webmasters/answer/6062598?hl=zh-Hans
未经允许不得转载:陈海飞博客 » 谷歌优化:noindex元标记篇