火车头休眠管理插件，可设置采集N条休眠N分钟后继续采集

qyhack · 发表于 2014-10-27 12:48:42

本帖最后由 qyhack 于 2014-10-27 19:42 编辑

火车头休眠管理插件，可设置采集N条休眠N分钟后继续采集

之前给一个客户做采集数据的时候，采集的目标站点如果连续访问次数过多就会出现限制访问的情况，因此写了一个根据采集数量自动休眠的插件，可自定义设置采集多少条数据后开始休眠多少分钟后继续采集，我想其他朋友也可能会遇到此类问题。所以共享出这个插件。

提供数据采集服务联系QQ：664396986

附件：

你只需把写好的插件放在采集器的\Plugins\LocoySpider 目录下面，然后就可以在采集器里面选择使用了，
如下图：

在规则的第四步文件保存及部分高级设置，任务C#插件，那里选择插件，然后点击保存关闭规则，从新打开，才能测试。

kuhabe · 发表于 2014-10-27 13:20:29

具体的使用方法呢？文件放到\Plugins 目录下，测试无效。

qyhack · 发表于 2014-10-27 13:29:29

kuhabe 发表于 2014-10-27 13:20
具体的使用方法呢？文件放到\Plugins 目录下，测试无效。

已经附上插件使用方法

liyicai01 · 发表于 2014-10-27 19:40:11

非常感谢楼主太给力了

zhansheng2007 · 发表于 2014-10-27 23:18:26

不清楚说明是什么

qyhack · 发表于 2014-10-28 10:44:20

zhansheng2007 发表于 2014-10-27 23:18
不清楚说明是什么

采集N条数据后就停止采集N分钟，然后再采集

火车头休眠管理插件，可设置采集N条休眠N分钟后继续采集

本帖子中包含更多资源