如果您的此类邮件过多，导致 Googlebot 无法访问您的主页，您可能需要通过 robots.txt 阻止它们。 我看到一些客户通过清理 XML ，看到了排名的全面提升。 我真的每天需要抓取 6,000 到 20,000 个页面吗？或者 Googlebot 是否通过评论回复或分享来跟踪电子邮件网址？ 仅供参考，如果您有一组内容定期更改的核心页面（例如博客、新产品或产品类别页面），并且您有很多页面（例如单个产品页面），Google 最好将它们编入索引，但不会以重新抓取和不索引核心页面为代价，那么您可以提交一个页面供 Google 考虑将其视为 XML。
比那些未被屏蔽但不在站点
地图中的内容更重要。 调试索引问题 这就是 XML 站点地图对于 SEO 真正有用的地方：当您向 Google 提交一堆页面进行索引时，实际上只有 whatsapp 数据库 少数页面被索引。 Google Search Console 不会告诉您他们正在对哪些页面建立索引，而只会告诉您每个 XML 站点地图中绘制的汇总数字。
假设您是一个电子商务网站
有 100,000 个产品页面、5,000 个类别页面和 20,000 个子类别页面。您提交了包含 125,000 个页面的 XML 站点地图，并发现 Google 正在为其中的 87,000 个页面编制索引。但哪 87,000 个呢？ 首先，您的类别和子类别页面可能是您最重要的搜索目标。
我将创建一个并分别提交。您期望在那里 但几乎每个不满的客户都会因为折 看到几乎 100% 的索引 – 如果您没有得到它，您知道您需要考虑在它们上创建更多内容，增加它们的链接效率，或两者兼而有之。
您可能会发现诸如产品类
别或子类别页面之类的内容没有被索引，因为它们只有 1 个产品（或根本没有）——在这种情况下，您可能需要在它们上设置元机器人“noindex,follow”，并从 XML 站点地图中提取它们。 问题很可能出在 100,000 个产品页面中的某些页面上 – 但是哪 学生手机清单 些页面呢？ 从一个假设开始，将您的产品页面拆分为不同的 XML 站点地图来测试这些假设。
您可以同时做几件事——
在多个站点地图中拥有一个 URL 是可以的。 您可以从 3 个想法开始： 没有产品图片的页面不会被索引。 独特描述少于 200 个单词的页面不会被索引。 没有评论/评论的页面不会被索引。 创建一个 XML 站点地图，其中包含属于每个类别的有意义的页面数。
不一定是该类别中的所有页面，只是样本大小使得根据索引得出结论是合理的。例如，您可以每页打印 100 页。 您的目标是使用任何给定站点地图的总体索引百分比来识别正在建立索引或未建立索引的页面的属性。 一旦您知道问题所在，您就可以编辑页面内容（或页面链接），或取消页面索引。
例如 个产品页面中有
20,000 个的产品描述可能少于 50 个单词。如果这些不是高流量术语，并且您从制造商的源中获取描述，那么可能不值得您花时间尝试为这 20,000 个页面中的每一页手动编写额外的 200 个单词的描述。您可以将所有产品描述少于 50 个字的页面的元机器人设置为“noindex,follow”，因为 Google 无论如何都不会索引它们，它们只会降低您的整体网站质量排名。