·设为首页收藏本站📧邮箱修改🎁免费下载专区💎积分✅卡密📒收藏夹👽聊天室
12下一页
返回列表 发布新帖

百度死链提交显示已经删除,但蜘蛛仍然每天大量访问死链

330 19
发表于 2022-4-9 14:23:58 | 查看全部 阅读模式

马上注册,免费下载更多dz插件网资源。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
看网站日志出现一堆404,是否有必要写robots把死链目录屏蔽禁止蜘蛛抓取,禁止了抓取频次暴跌会降权不?
我要说一句 收起回复
创宇盾启航版免费网站防御网站加速服务

评论19

TyCodingLv.8 发表于 2022-4-9 14:24:36 | 查看全部
正常,我们经常遇到。
我要说一句 收起回复
IT618发布Lv.8 发表于 2022-4-9 14:24:55 | 查看全部
做了404就可以了 不要禁止
我要说一句 收起回复
婷姐楼主Lv.8 发表于 2022-4-9 14:25:44 | 查看全部
禁止好像会导致抓取频次暴跌
我要说一句 收起回复
拾光Lv.8 发表于 2022-4-9 14:26:25 | 查看全部
不管他就可以了吗
我要说一句 收起回复
婷姐楼主Lv.8 发表于 2022-4-9 14:27:03 | 查看全部
你们有写robots禁止抓取死链目录吗
我要说一句 收起回复
独家记忆Lv.8 发表于 2022-4-9 14:27:21 | 查看全部
我也有这种情况!
我要说一句 收起回复
CrystαlLv.8 发表于 2022-4-9 14:27:31 | 查看全部
能不能发点文章把死链变成正常地址
能的话好点
我要说一句 收起回复
IT618发布Lv.8 发表于 2022-4-9 14:28:10 | 查看全部
没关系,过段时间就正常了
我要说一句 收起回复
婷姐楼主Lv.8 发表于 2022-4-9 14:28:46 | 查看全部
没必要把robots写了屏蔽死链目录不
我要说一句 收起回复

回复

 懒得打字嘛,点击右侧快捷回复【查看最新发布】   【应用商城享更多资源】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

创宇盾启航版免费网站防御网站加速服务
投诉/建议联系

discuzaddons@vip.qq.com

未经授权禁止转载,复制和建立镜像,
如有违反,按照公告处理!!!
  • 联系QQ客服
  • 添加微信客服

联系DZ插件网微信客服|最近更新|Archiver|手机版|小黑屋|DZ插件网! ( 鄂ICP备20010621号-1 )|网站地图 知道创宇云防御

您的IP:18.119.117.77,GMT+8, 2024-12-23 04:07 , Processed in 0.485933 second(s), 129 queries , Gzip On, Redis On.

Powered by Discuz! X5.0 Licensed

© 2001-2024 Discuz! Team.

关灯 在本版发帖
扫一扫添加微信客服
QQ客服返回顶部
快速回复 返回顶部 返回列表