遇到了一个比较奇怪的现象，一个站昨天收录放出了40多条内页，但是蜘蛛才13条，放出的内页更新时间都是昨天的。注：放出的内页更新时间都在计算时间内，不存在说是前天抓取的情况。
下面是宝塔上的蜘蛛统计和自写的蜘蛛统计工具 都对应的上。
百度是不是上线了很多其他ip段的蜘蛛，有了解的分享下来