cmcun 发表于 2012-10-25 17:04:31

火车头就差一个采集间隔的功能

有的网站对于你过快的访问就会给出错页面,
比如亚马逊在你过快采集就会出现问题

这个功能,可以是采集的时间间隔(最好是可以设置一个范围内的随机时间)
也可以是对于页面采集不到的时候可以设置重试,重试时间间隔,重试多少次

希望官方能多多完善
页: [1]
查看完整版本: 火车头就差一个采集间隔的功能