火车头采集到本地数据新增（每采集一次增加一条数据）

deepv · 发表于 2014-8-23 22:48:48

本帖最后由 deepv 于 2014-8-25 11:47 编辑

火车头采集数据时每采集一次本地数据库增加一条数据。

采集的是连续剧所以要不断重复采集

1.怎么设置才能做到，采集到的数据如果是同一条（任务网址为准）就以覆盖保存在本地。

2.其实最主要原因是，明明只采集十多条任务，但一段时间后（重复采集），

发布到网站时就变成了几百个任务（火车头一条一条检测），而真正有用成功发布到网站的只有10多条。
怎么减少发布时火车头检测本地数据数量？？？

是哪里设置出了问题？

303718 · 发表于 2014-8-24 08:24:50

采连续剧要发布接口支持才行的。

阿哲 · 发表于 2014-8-24 14:07:28

写一个接口文件进行处理。

deepv · 发表于 2014-8-25 11:48:45

303718 发表于 2014-8-24 08:24
采连续剧要发布接口支持才行的。

已经有发布的接口，问题是在发布前本地数据库-序号就有几百条了，而实际只能30-40条（其它都是重复）。

而到发布网站时，火车头就会把本地数据库里的数据一条一条检测.

如何把发布时检测本地数据数量减少？？

303718 · 发表于 2014-8-25 13:45:01

你采完一次第二次采的时候只采第一页有更新的这样采的就少了

帐号		自动登录	找回密码
密码			加入会员

火车头采集到本地数据新增（每采集一次增加一条数据）

本帖子中包含更多资源