知新SEO社区百度蜘蛛抓取频次记录分析2015.7.18


对于不同网站蜘蛛的抓取频次会不一样,新网站蜘蛛的抓取频次会很少可能只有几次或者几十次,老网站的抓取频次可能会更多,网站的蜘蛛抓取频次还跟网站的内容量有关,内容量越多蜘蛛的抓取频次就会越多,另外抓取频次还跟网站的权重有关系,虽然网站的内容量很多,但是权重很低比如作弊被惩罚,那么蜘蛛的抓取频次就会不多。推荐阅读:Baiduspider抓取频次原则及调整方法

目前百度站长论坛没有具体说明多少抓取频次是合理的,所以空谷对知新SEO技术社区百度蜘蛛抓取频次做了一下记录,以供大家做参考。

知新SEO社区是2015年1月份开始建设,截至今天2015.7.18日讨论内容量大约300,话题大约200个,目前百度的总索引量是313,如图所示:
百度索引量.gif

目前百度蜘蛛的抓取频次大约在30每天,如图所示:
百度蜘蛛的抓取频次.gif

分析:
知新SEO社区的内容量总共大约500,按照百度每天的平均抓取量30,一个月不重复的抓取能达900基本能够覆盖当前的内容量,因此目前的抓取频次对于知新SEO社区当前规模的网站是合理的。

知识扩展:
什么是抓取频次
抓取频次是搜索引擎在单位时间内(天级)对网站服务器抓取的总次数,如果搜索引擎对站点的抓取频次过高,很有可能造成服务器不稳定,Baiduspider会根据网站内容更新频率和服务器压力等因素自动调整抓取频次。
已邀请:

要回复问题请先登录注册