则该网页可能会被编入索引
即使您是SEO外包新手也没关系！我们的SEO咨询服务是一项为客户量身定制措施的服务。 查看 SEO 咨询服务 您是否在 Search Console 的页面索引报告中看到“已被 robots.txt 阻止但已编入索引”时遇到问题？这不是一个错误，但它显示为警告，所以您担心它可能会对您的 SEO 产生负面影响，对吗？在这里，我们将解释显示的原因和内容，并详细说明如何处理。 目录[隐藏] 1关于状态类型内容 2这是什么意思？ 2.1当前页面状态不一致 3搜索结果显示状 [url=https://lastdatabase.com/zh-CN/]电话号码列表[/url] 态 四可能的原因 五解决方案 5.1如果你不想索引 5.2如果你想索引 6有关“被 robots.txt 阻止但已编入索引”的常见问题 6.1我是否需要修复“已被 robots.txt 阻止但已编入索引”？ 6.2错误“已被 robots.txt 阻止但已编入索引”是什么意思？ 7概括 IntimateSEO让任何人都可以轻松采取SEO措施 关于状态类型内容 现在，我们来检查一下“被robots.txt阻止，但已在索引中注册”的内容。在Search Console中，它将从[索引] > [页面]显示，如下图所示。 Google 的 Search Console 帮助对此状态进行了如下描述： 被 robots.txt 阻止并编入索引 该页面被网站的 robots.txt 文件阻止并编入索引。Google 始终尊重 robots.txt 的内容，但如果其他用户链接到您的页面，它不一定会阻止索引。Google 不会请求或抓取您的网页，但它可能会使用链接到被阻止网页的网页信息将其编入索引。此外，由于 robots.txt 规则，出现在 Google 搜索结果中的该页面的片段内容可能非常有限。 （引用）Search Console帮助“页面索引报告” 这是什么意思？ 尽管被 robots.txt 阻止（不允许），但仍会出现以下消息：“从其他页面和网站到被阻止页面的链接在没有“nofollow 设置”的情况下发布，因此无法对其建立索引。”这意味着 当前页面状态不一致 尽管我不希望爬虫抓取该页面（robots.txt 中不允许），但还是有一个从某处指向该页面的链接。 由于存在指向该页面的链接，但没有进行nofollow等设置，因此如果在robots.txt中设置了Disallow，爬虫将不会抓取，但由于存在指向该页面的链接，因此它会识别该URL并将其注册到索引中。我会做。 搜索结果显示状态 显示“已被 robots.txt 阻止但已编入索引”的页面将出现在搜索结果中，因为它们已编入索引。
[url=https://lastdatabase.com/zh-CN/][img]http://zh-cn.consumerlead.me/wp-content/uploads/2024/01/%E7%94%B5%E8%AF%9D%E5%8F%B7%E7%A0%81%E5%88%97%E8%A1%A8-300x168.jpg[/img][/url]
如果您链接到 robots.txt 中不允许的其他网站的网页，则该网页可能会被编入索引。Google 不会 抓取被 robots.txt 文件阻止的内容或将其编入索引。不过，在以下情况下，我们可能会检测被阻止的网址并为其编制索引：它们是从网络上的其他地方链接到的。因此，URL 地址和可能的其他公共信息（例如页面链接的锚文本）可能会出现在 Google 搜索结果中。为了确保特定网址不会出现在 Google 搜索结果中，需要对服务器上的文件进行密码保护、使用 noindex 元标记或响应标头，或者完全删除该页面。 （引用）Google 搜索中心“ robots.txt 概述和指南” 此类页面如何出现在搜索结果中？ 尽管已编制索引，但爬网程序并未爬网该页面，因此该代码段显示“此页面没有信息。
頁:
[1]