·设为首页收藏本站📧邮箱修改🎁免费下载专区💎积分✅卡密📒收藏夹👽聊天室
返回列表 发布新帖

Robots封禁有没有遇到过的

232 8
发表于 2022-12-16 11:31:52 | 查看全部 阅读模式

马上注册,免费下载更多dz插件网资源。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
已经排除 robots问题、和模板屏蔽蜘蛛的问题,dns也换了重新解析。域名没有被强、刚BA完,新搞到的老域名,从前天上线到今天现在是真真没有任何一个搜索引擎的蜘蛛,做抓取诊断测试也没有,有没有其他人遇到过这种情况

Robots封禁有没有遇到过的 robots,封禁,有没有,没有,遇到 Robots封禁有没有遇到过的 robots,封禁,有没有,没有,遇到 Robots封禁有没有遇到过的 robots,封禁,有没有,没有,遇到
我要说一句 收起回复
创宇盾启航版免费网站防御网站加速服务

评论8

IT618发布Lv.8 发表于 2022-12-16 11:32:38 | 查看全部
rotots.txt文件没问题,就看下那个具体页面用模拟工具抓取测试一下再说
我要说一句 收起回复
独家记忆Lv.8 发表于 2022-12-16 11:33:34 | 查看全部
内容页、首页、列表页、新建非模板的页面抓取都不行
我要说一句 收起回复
浅生Lv.8 发表于 2022-12-16 11:34:06 | 查看全部
应该是你的程序问题,由于系统抓取时,读不出来页面,信息!

所以才反馈抓取失败!

也有可能是,你首页文件,没有设置好,系统读不到首页文件
我要说一句 收起回复
TyCodingLv.8 发表于 2022-12-16 11:34:48 | 查看全部
程序、首页都没有问题。程序是个人专用的二开过的一个老程序
我要说一句 收起回复
IT618发布Lv.8 发表于 2022-12-16 11:35:12 | 查看全部
前天到今天,总共也才不到三天,再等等看吧~
我要说一句 收起回复
IT618发布Lv.8 发表于 2022-12-16 11:35:45 | 查看全部
这肯定有问题啊、自然不来蜘蛛我理解。现在是抓取诊断提示robots封禁、可找不到原因、反馈了看下百度那边怎么说
我要说一句 收起回复
IT618发布Lv.8 发表于 2022-12-16 11:36:09 | 查看全部
客服反馈一下。
我要说一句 收起回复
拾光Lv.8 发表于 2022-12-16 11:37:07 | 查看全部
恩 反馈了 等等看
我要说一句 收起回复

回复

 懒得打字嘛,点击右侧快捷回复【查看最新发布】   【应用商城享更多资源】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

创宇盾启航版免费网站防御网站加速服务
投诉/建议联系

discuzaddons@vip.qq.com

未经授权禁止转载,复制和建立镜像,
如有违反,按照公告处理!!!
  • 联系QQ客服
  • 添加微信客服

联系DZ插件网微信客服|最近更新|Archiver|手机版|小黑屋|DZ插件网! ( 鄂ICP备20010621号-1 )|网站地图 知道创宇云防御

您的IP:3.141.12.254,GMT+8, 2024-11-8 23:02 , Processed in 0.242727 second(s), 123 queries , Gzip On, Redis On.

Powered by Discuz! X5.0 Licensed

© 2001-2024 Discuz! Team.

关灯 在本版发帖
扫一扫添加微信客服
QQ客服返回顶部
快速回复 返回顶部 返回列表