·设为首页收藏本站📧邮箱修改🎁免费下载专区💎积分✅卡密📒收藏夹👽聊天室
返回列表 发布新帖

百度是不是上线了很多其他未知的蜘蛛

231 6
发表于 2023-3-13 18:52:11 | 查看全部 阅读模式

马上注册,免费下载更多dz插件网资源。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
遇到了一个比较奇怪的现象,一个站昨天收录放出了40多条内页,但是蜘蛛才13条,放出的内页更新时间都是昨天的。注:放出的内页更新时间都在计算时间内,不存在说是前天抓取的情况。
下面是宝塔上的蜘蛛统计和自写的蜘蛛统计工具 都对应的上。
百度是不是上线了很多其他ip段的蜘蛛,有了解的分享下来
百度是不是上线了很多其他未知的蜘蛛 百度,百度是,是不是,不是,上线 百度是不是上线了很多其他未知的蜘蛛 百度,百度是,是不是,不是,上线
我要说一句 收起回复
创宇盾启航版免费网站防御网站加速服务

评论6

浅生Lv.8 发表于 2023-3-13 18:52:19 | 查看全部
蜘蛛今天抓的,获取到到时间因子,也显示昨天时间,按照昨天时间显示
我要说一句 收起回复
浅生Lv.8 发表于 2023-3-13 18:52:31 | 查看全部
本帖最后由 無剑 于 2023-3-13 18:51 编辑

我日。。。。。是这个道理。。。我还以为又上线了其他ip段。。。那个多少小时前就是更新时间,不是快照时间了。。。。
我要说一句 收起回复
婷姐Lv.8 发表于 2023-3-13 18:52:57 | 查看全部
对 以前快照在的时候,快照时间是蜘蛛抓取时间,百度显示时间是获取页面的时间因子
我要说一句 收起回复
浅生Lv.8 发表于 2023-3-13 18:53:08 | 查看全部
来个人试试把更新时间改为动态即访问时间试试,看是啥效果
我要说一句 收起回复
婷姐Lv.8 发表于 2023-3-13 18:53:34 | 查看全部
那方法等死吧,我玩过,很快网站就死了。
我要说一句 收起回复
TyCodingLv.8 发表于 2023-3-13 18:54:31 | 查看全部
没有吧,百度出了很多欺骗蜘蛛你不知道吧
我要说一句 收起回复

回复

 懒得打字嘛,点击右侧快捷回复【查看最新发布】   【应用商城享更多资源】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

创宇盾启航版免费网站防御网站加速服务
投诉/建议联系

discuzaddons@vip.qq.com

未经授权禁止转载,复制和建立镜像,
如有违反,按照公告处理!!!
  • 联系QQ客服
  • 添加微信客服

联系DZ插件网微信客服|最近更新|Archiver|手机版|小黑屋|DZ插件网! ( 鄂ICP备20010621号-1 )|网站地图 知道创宇云防御

您的IP:3.139.80.194,GMT+8, 2024-12-27 21:18 , Processed in 0.381550 second(s), 111 queries , Gzip On, Redis On.

Powered by Discuz! X5.0 Licensed

© 2001-2024 Discuz! Team.

关灯 在本版发帖
扫一扫添加微信客服
QQ客服返回顶部
快速回复 返回顶部 返回列表