去评论
dz插件网

180.163.28.114这个是什么IP

左右不逢缘
2024/08/12 21:44:08
180.163这个IP段很奇怪,网站更新后,首页列表还没更新。他就能直接抓取更新的链接,而且网站后台也抓我分析不可能的采集的IP。因为首页列表没更新,新发布的链接,根本无法抓取,链接ID是没有规律的

应该是有些搜索引擎基于浏览器的触发抓取,你新生成的页面,你浏览器打开后,他就通知蜘蛛来抓,后台也是的,你后台更新文章生成后台的链接,触发了浏览器,通知蜘蛛来抓取
因为服务器没有入侵了,我修改了后台后,还是抓后天,这个不可能有人知道后台的,肯定的浏览器触发的