·设为首页收藏本站📧邮箱修改🎁免费下载专区💎积分✅卡密📒收藏夹👽聊天室
返回列表 发布新帖

火车头会重复采集相同内容吗

110 3
发表于 2023-12-4 09:53:34 | 查看全部 阅读模式

马上注册,免费下载更多dz插件网资源。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
比如我现在采集一个站几千条内容,过一段时间有新的更新了,我继续用上次规则采集,会采集到最开始已经采集过一次的内容吗
我要说一句 收起回复
创宇盾启航版免费网站防御网站加速服务

评论3

独家记忆Lv.8 发表于 2023-12-4 09:53:44 | 查看全部
用同一个
火车头会重复采集相同内容吗 采集,火车头,更新,上次,规则
我要说一句 收起回复
IT618发布Lv.8 发表于 2023-12-4 09:54:13 | 查看全部
可以设置的,不采集相同内容就是
我要说一句 收起回复
CrystαlLv.8 发表于 2023-12-4 09:55:11 | 查看全部
用同一个任务,运行多少次,都不会重复采集。如果不想让采集重复的标题或者其它,标签下有选项。
另外:实测两种表况下网址依然会重复采集。
1、采集到的数据量大于100万(大约),
2、采集到的数据量虽然没有大于100万,但是采集到的网址库大于100万
可以查看任务数据库ID。
我要说一句 收起回复

回复

 懒得打字嘛,点击右侧快捷回复【查看最新发布】   【应用商城享更多资源】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

创宇盾启航版免费网站防御网站加速服务
投诉/建议联系

discuzaddons@vip.qq.com

未经授权禁止转载,复制和建立镜像,
如有违反,按照公告处理!!!
  • 联系QQ客服
  • 添加微信客服

联系DZ插件网微信客服|最近更新|Archiver|手机版|小黑屋|DZ插件网! ( 鄂ICP备20010621号-1 )|网站地图 知道创宇云防御

您的IP:18.225.55.42,GMT+8, 2024-12-25 01:36 , Processed in 0.250103 second(s), 97 queries , Gzip On, Redis On.

Powered by Discuz! X5.0 Licensed

© 2001-2024 Discuz! Team.

关灯 在本版发帖
扫一扫添加微信客服
QQ客服返回顶部
快速回复 返回顶部 返回列表