[经验分享]如何继续采集以前未完成的任务
告诉一个大家知道的技巧。。。。。。。如果你采一个站的资源时列表页100页共采到10000个文章。可能在采集过程中突然停止或是因不可抗拒因素(键盘坏掉,鼠标坏掉,火车不运行,断网,断电,电脑冒烟)中断了任务一次没采完时,第二次再继续这个任务时将任务里的采集网址范围改了(不用再去分析那100页的list页面了)。。。火车会继续将上次未完成的(并且已经采集到的地址,如果是新闻类的,第50页后的那些新闻页面估计不会再有变化叻,不用再去重试了)继续。。而不用再漫长的等待地址采集----------
:lol :lol 俺措词可能不当。。这是QQ聊天时突然想到的就把QQ聊天记录贴上来了。。。希望大家能看懂。。看不懂的话我再来修改原文
[ 本帖最后由 原始森林 于 2007-4-10 18:32 编辑 ] 我还真没有看明白,太笨了点 :lol稍微改了改,看得懂了吗。。。不会更晕了吧~~
[ 本帖最后由 原始森林 于 2007-4-10 16:59 编辑 ] HOHO看到加分了。。谢谢谢谢!除了CCTV以外我都感谢! 昨天晚上才突然发现这个功能,因为我采集另外一个栏目的时候突然发现多出500多条,一看才看到顶上写了继续上次未完成任务。呵呵~ xuexi 支持!
是修改原来的网址还是?
页:
[1]