帝国论坛帝国网站管理系统交流区采集使用交流采集自动入库,重复严重,怎么解决 【本版专题贴子】  
主题:采集自动入库,重复严重,怎么解决 [加入收藏夹]   

u95588
用户头衔:书生

精华贴   :0
发贴数   :32
经验值   :162
注册时间:2011-01-11
信息 搜索 好友 发送悄悄话 精益求精-帝国网站管理系统7.5正式版开源发布】   [第 1 楼]
采集自动入库,重复严重,怎么解决
采集设置的是自动入库的 没有选择重复采集的,按道理不会重复采集,
今天发现每个信息重复了8条, 采集了2天 没想到数据暴涨 是重复了的原因
我是用计划任务自动采集入库的 选择碰到这个重复的问题 什么解决啊




2015-01-27 11:06:08 已设置保密 顶部 回复 引用 报告 编辑 删除

pingpong
用户头衔:探花

精华贴   :0
发贴数   :9328
经验值   :24281
注册时间:2008-11-02
信息 搜索 好友 发送悄悄话 免费开源-EBMA系统:更安全的MYSQL管理和备份系统】   [第 2 楼]

同一个链接不会重复采集,除非采集中断,检查是不是采集中断了




2015-01-29 08:11:48 已设置保密 顶部 回复 引用 报告 编辑 删除

saintjordi
用户头衔:书生

精华贴   :0
发贴数   :111
经验值   :229
注册时间:2012-11-02
信息 搜索 好友 发送悄悄话 精益求精-帝国网站管理系统7.5正式版开源发布】   [第 3 楼]

没有遇到过重复的问题



体育装备-www.verodillan.com
2019-09-27 20:37:29 已设置保密 顶部 回复 引用 报告 编辑 删除

快速回复
内容

表情
使用EBB代码 使用smile代码 显示签名 自动分析url 自动分析img
     【进入高级模式】   (按 Ctrl+Enter 直接提交)
    顶部  加入收藏夹
关于帝国 | 广告服务 | 联系我们 | 法律声明 | 隐私条款 | 许可协议
Powered by: EBB Version 2.2.1