·设为首页收藏本站📧邮箱修改🎁免费下载专区💎积分✅卡密📒收藏夹👽聊天室
返回列表 发布新帖

大家遇到过这种爬虫吗?

204 7
发表于 2023-2-14 08:08:29 | 查看全部 阅读模式

马上注册,免费下载更多dz插件网资源。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
大家遇到过这种爬虫吗? 大家,遇到,遇到过,这种,爬虫


刚上的新站,一天几千次这种IP的请求,而且是模拟真实浏览器,这里的哥们有谁也遇到过这种情况没?
我要说一句 收起回复
创宇盾启航版免费网站防御网站加速服务

评论7

IT618发布Lv.8 发表于 2023-2-14 08:09:15 | 查看全部
采集吧,不要在意爬虫
我要说一句 收起回复
IT618发布Lv.8 发表于 2023-2-14 08:09:23 | 查看全部
问题是我刚PUSH给百度的页面,他秒过来爬,难不成被中间攻击了。。。我这里记录的是JS代码发送的AJAX请求记录的IP地址,他不但模拟了真实浏览器,还屏蔽了百度统计。感觉就跟真实蜘蛛一样。
我要说一句 收起回复
IT618发布Lv.8 发表于 2023-2-14 08:09:53 | 查看全部
大家遇到过这种爬虫吗? 大家,遇到,遇到过,这种,爬虫
看不到记录
我要说一句 收起回复
独家记忆Lv.8 发表于 2023-2-14 08:10:39 | 查看全部
会不会是他在代码里设置了禁止访问第三方网址?你这个记录的js是你域名下的吗?
我要说一句 收起回复
IT618发布Lv.8 发表于 2023-2-14 08:10:51 | 查看全部
对,这些IP访问的页面里面我加了JS代码,只要请求页面就会把IP请求到后台记录到数据库
我要说一句 收起回复
IT618发布Lv.8 发表于 2023-2-14 08:11:48 | 查看全部
APPLE  莫不是苹果的蜘蛛
我要说一句 收起回复
CrystαlLv.8 发表于 2023-2-14 08:12:36 | 查看全部
路过学习一下啊
我要说一句 收起回复

回复

 懒得打字嘛,点击右侧快捷回复【查看最新发布】   【应用商城享更多资源】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

图文热点
创宇盾启航版免费网站防御网站加速服务
投诉/建议联系

discuzaddons@vip.qq.com

未经授权禁止转载,复制和建立镜像,
如有违反,按照公告处理!!!
  • 联系QQ客服
  • 添加微信客服

联系DZ插件网微信客服|最近更新|Archiver|手机版|小黑屋|DZ插件网! ( 鄂ICP备20010621号-1 )|网站地图 知道创宇云防御

您的IP:18.118.226.167,GMT+8, 2024-11-22 07:41 , Processed in 0.474041 second(s), 113 queries , Gzip On, Redis On.

Powered by Discuz! X5.0 Licensed

© 2001-2024 Discuz! Team.

关灯 在本版发帖
扫一扫添加微信客服
QQ客服返回顶部
快速回复 返回顶部 返回列表