发新话题
打印

有没有避免重复采集的功能

有没有避免重复采集的功能

如果没有,希望能添上,试用了好像没有

不知道好不好添,我想可以这样,把采集的网址连接中由采集者设定一个唯一递增的变量
比如http://btsou.com/Show.asp?ID=2006/0207/1742501207
那就把1742501207设成(*)
然后,在采集结束后生成一个本次采集的最大数并记录到本地
那么在下次采集的时候,必须大于这个数才允许采集

然后,还要能清除这个数 或 手动设置值个数

对编程一窍不通,只是个想法,见笑了

老大一定很忙,我是新手,才发现这个好东东,支持!

TOP

支持!!!!!!!!!!!

TOP

支持

TOP

嗯,这个有用

TOP

这个功能很需要

TOP

支持
也发现同一问题

TOP

有用!

TOP

发新话题
Powered by Discuz! 6.0.0  © 2001-2007 Comsenz Technology Ltd
Processed in 0.116890 second(s), 6 queries, Gzip enabled
当前时区 GMT+8, 现在时间是 2008-10-8 04:23 皖ICP备06000549 清除 Cookies - 联系我们 - 火车采集器官方站 - 静态归档