wordpress 搜索引擎优化( 阻止Google从索引网站的“索引”是一种标准做法)
优采云 发布时间: 2021-10-05 17:18wordpress 搜索引擎优化(
阻止Google从索引网站的“索引”是一种标准做法)
厦门网站建设
WordPress 宣布了一项重要更改,将阻止搜索引擎索引 网站。此更改放弃了传统的 Robots.txt 解决方案,转而采用机器人元标记方法。此更改使 WordPress 与阻止 Google 的原因保持一致,这是为了防止被阻止的网页出现在 Google 的搜索结果中。
这是 WordPress 将使用的机器人元标记:
阻止 Google 编入索引
长期以来,使用Robots.txt来屏蔽网站的“索引”已经成为一种标准做法。
术语“索引”表示 GoogleBot 将抓取 网站。通过使用 Robots.txt 阻止功能,您可以阻止 Google 下载指定的网页,假设 Google 无法在搜索结果中显示您的网页。
但是 robots.txt 命令只会阻止 Google 抓取网页。如果 Google 可以找到该 URL,Google 仍然可以将其添加到索引中。
因此,为了防止网站出现在索引中,发布者会阻止谷歌将页面“编入索引”。这并不总是有效。
WordPress 5.3 真的会阻止索引
WordPress 使用 Robots.txt 方法。但是5.3 版本的情况正在发生变化。
当发布者当前选择“阻止搜索引擎索引此网站”时,它会在网站的robots.txt中添加禁止Google抓取网站的条目。
从 WordPress 5.3 开始,WordPress 将采用更可靠的机器人元标记方法来防止对 网站 进行索引。
此更改将影响“阻止搜索引擎将此站点编入索引”设置。
这种变化是一种改进。WordPress 发布者可以更安全地知道被阻止的页面不会出现在 Google 的搜索结果中。
WordPress 5.3 变更公告截图。
为什么 WordPress 使用 Robots.txt?
WordPress 依靠 Robots.txt 来防止 网站 的索引,因为每个人都不会在 Google 的搜索结果中显示网页。这是标准做法。
但是,即使每个人都这样做,正如已经解释过的,这也是一种不可靠的方法。
术语“索引”有两个含义:
索引意味着抓取,就像 Googlebot 访问和下载网页一样。编制索引还意味着将网页添加到 Google 的网页数据库(称为索引)。
阻止 Google 将网页“编入索引”将使网页无法看到,但 Google 仍然可以将网页编入索引并将其添加到 Google 的索引中。合理的?
Robots.txt 和机器人元标记
将页面排除在 Google 索引之外并不是 Robots.txt 解决方案的目的。这样做是机器人元标记的工作。
因此,很高兴看到 WordPress 使用机器人元标记作为防止网页在搜索引擎中显示的解决方案。
WordPress 5.3 计划于 2019 年 11 月发布。