最近老是碰到任务执行中突然不继续下去的情况
有一些本来一直好好的任务 ,然后执行到一半,比如说分析网址,就突然不动了,别的线程还在正常工作.然后我设置的超时时间根本像没有效果一样,不会自动中止.
希望检查一下这个问题, 这个问题是在近几次SP2的升级中新出来的,本来没有这么明显的.
我刚才我刚升了最新版 ,结果一样. 对了,像SOSO的百科,他们加入了在抓取时,分析同一IP过多的访问,然后要求输入验证码.
火车头对于采集和发布有时间间隔设置,
但是对于网址分析却没有...这样我一分析网址,马上就被SOSO抓住了
可不可能加入分析网址的,时间间隔设置
页:
[1]