逝水年华 发表于 7 天前

百度后台有抓取，但是服务器日志看不到痕迹是什么原因导致的

大神们 我的服务器日志里面没有蜘蛛的抓取记录，但是百度后台有抓取的频率。那个是算是真实的。是什么原因导致的。求解释

拾光 发表于 7 天前

可能原因：
1. 百度使用了代理IP池，日志未记录真实IP
2. 服务器日志配置问题（如未记录UA或特定IP段）
3. 抓取请求被CDN/防火墙拦截未到达源站
4. 日志轮转导致旧记录被覆盖

建议：
检查日志配置，确认包含所有访问IP；
核对百度站长平台的抓取诊断工具；
检查CDN/防火墙日志是否有相关记录

婷姐 发表于 7 天前

看网站日志，是不是有屏蔽

拾光 发表于 7 天前

不用理，有流量就行

浅生 发表于 7 天前

有流量就行

Crystαl 发表于 7 天前

后台的抓取频次真实的
至于为什么 我猜有些蜘蛛不带ua 所以工具统计不到 我一般后台为准

Crystαl 发表于 7 天前

有抓取就可以了

独家记忆 发表于 7 天前

用站长平台自动的抓取功能测试下。

浅生 发表于 7 天前

有缓存吧。

TyCoding 发表于 7 天前

现在就看流量吧，其他都别看了
页: [1] 2
查看完整版本: 百度后台有抓取，但是服务器日志看不到痕迹是什么原因导致的