网站的蜘蛛抓取频次突然由几万降到几百是怎么回事啊?怎么解决呢
1、站长词库关键词比较稳定,流量比较稳定;
2、对应的二级域名抓取频次与主站同样的时间节点出现蜘蛛抓取频次下降的问题
3、查看了抓取情况,没有返回错误代码,抓取速度也正常
4、查看了robots文件,也正常
2、对应的二级域名抓取频次与主站同样的时间节点出现蜘蛛抓取频次下降的问题
3、查看了抓取情况,没有返回错误代码,抓取速度也正常
4、查看了robots文件,也正常