网站抓取频率低的原因及解决方法

我们在SEO优化一个网站时候，会时常去关注网站日志，进而来分析搜索引擎蜘蛛爬取极其抓取过程。从这上面我们可以得到很多信息，如页面爬取时间，蜘蛛喜欢的页面，对蜘蛛爬取造成负担的页面等，这些都是可以从网站日志中得出的结论。长时间的归纳总结对比，不难发现网站存在的一些潜在问题。 通过百度资源后台我们还能通过抓取频率来大致得出网站的优缺点，但在很多小站中，抓取频率是极其不稳定的，忽高忽低，如坐过山车似的。

>>阅读原文<<