其实呀,我们这些站长们担心都是多余的。为什么会这样说呢?抓随着抓取频次的增多。说明我们网站有一定的内容在吸引着蜘蛛。也有可能是我们网站有一些链接,出现了死循环。但是抓取频次的增多,说明了我们的网站还是很受蜘蛛的青睐的。而这个时候,我们不是需要来担心正常与否。而是要及时更新网站内容。检查网站链接是否有死链。不断的吸引的蜘蛛,增加我们网站的索引量,这样才能为我们的网站带来流量。
回到原来的问题,多少的抓取频次才正常啊。通过在互联网上不断的搜索答案,可以得出:一般正常规模的博客或者是个人网站,如果页面容量达到了400或者是500个页面大概每天的抓取频次为100~200之间。如果网站的规模较大,有上万个页面。那么每天的抓取频次可能会达到1000~2000之间。
当然对于那些网站更新很没有规律,然后内容也不好,质量差。百度蜘蛛的抓取频率会逐渐的降低,或者是为零,或者是某一天突然增加,或者是持续的每天都只有个位数。那么这样就是有问题的,抓取频次其实也不是问题,是把问题反馈了给站长,需要站长去关注自己的网站内容,以及去看一下自己网站的访问速度。因此我们个人网站不要太过于关注百度蜘蛛或者是其他蜘蛛的抓取频次,我们一定要专注于我们的网站内容是否是原创,是否能够给客户或者是网上的用户带来帮助,提供他们想要的信息。这就是我这样的个人站长对蜘蛛的抓取频次的理解。
|