最近老是碰到任务执行中突然不继续下去的情况

NMB · 发表于 2010-12-4 10:16:36

有一些本来一直好好的任务 ,然后执行到一半,比如说分析网址,就突然不动了,别的线程还在正常工作.

然后我设置的超时时间根本像没有效果一样,不会自动中止.

希望检查一下这个问题, 这个问题是在近几次SP2的升级中新出来的,本来没有这么明显的.

我刚才我刚升了最新版 ,结果一样.

NMB · 发表于 2010-12-4 11:41:27

对了,像SOSO的百科,他们加入了在抓取时,分析同一IP过多的访问,然后要求输入验证码.

火车头对于采集和发布有时间间隔设置,
但是对于网址分析却没有...这样我一分析网址,马上就被SOSO抓住了

可不可能加入分析网址的,时间间隔设置