我们可以找出一些潜在的罪魁祸首。 首先，该网站的平均抓取响应时间相当高——接近 3,000 毫秒，超过 300 毫秒就应该令人担忧了。这可能是因为 Google 预计会抓取太多低价值内容，要么是因为此类内容太多，要么是因为该网站实施的抓取控制不足。 其次，我们可以向下滚动一点，我们可以看到该网站的抓取请求中只有 7%是为了发现新页面。 GSC 按目的搜索 来源：Search Console 这意味着该网站的 600,000 个 URL 中的绝大多数根本没有被发现和抓取，或者至少抓取速度非常非常慢。
你是对的但这只是一个
Google 如何抓取您的网站的最终真相来源在于您的日志文件。使用日志文件分析器，将过滤器设置为仅显示来自 Google 蜘蛛的命中，您就可 eBay ID 数据 以准确地知道搜索引擎命中了哪些 URL、它抓取这些 URL 的频率以及这些抓取的成功和效率。 Oncrawl 抓取效率 来源：Oncrawl 在较长时间内对这些数据进行采样并根据页面类型对其进行细分可以帮助您识别有问题的模式，取和索引控制来解决。
电脑前完成只要正
审核低效抓取的 URL 一旦你知道了哪些页面的爬取效率低下，下一步就是找出原因。进行网站审核是找到答案的有效方法。在 Oncrawl 中启 瑞士电子邮件列表 动爬取可帮助你收集各种类型的数据进行分析和交叉分析。可用的不同报告包括： 日志监控 抓取报告 SEO影响报告 排名报告 社交媒体报道 一般来说，页面无法被有效抓取有两个主要原因：技术控制使用不当和页面质量差。 技术 SEO 注意事项 为了使某个页面被发现和抓取，需要从某个地方链接到该页面。