支持 0
反对 0
举报
2022-03-16 11:14
仅从首页抓取数量是看不出有没有问题的,先看下当天有多少个不同IP段的baiduspider来访,正常情况下应该和首页抓取次数相差不多,也就是说每个蜘蛛平均抓取首页1次。
另外不一定首页抓取次数少就有问题,假设你网站首页抓取次数1000,但每天来访的蜘蛛就20个,掐指一算,平均每个蜘蛛抓取首页50次!哇~这重复抓取率也忒高了。 另一种情况就是首页抓取次数远小于蜘蛛数量,这一般有两种可能:第一种是网站首页基本不咋更新;第二种如果内页抓取次数跟首页一样在减少,在分析是因为服务器阻塞了?网站有过更改?还是降权了...... (ps:以上情况要看整体趋势,一两天证明不了啥) |