qyhack 发表于 2014-10-27 12:48:42

火车头休眠管理插件,可设置采集N条休眠N分钟后继续采集

本帖最后由 qyhack 于 2014-10-27 19:42 编辑

火车头休眠管理插件,可设置采集N条休眠N分钟后继续采集

之前给一个客户做采集数据的时候,采集的目标站点如果连续访问次数过多就会出现限制访问的情况,因此写了一个根据采集数量自动休眠的插件,可自定义设置采集多少条数据后开始休眠多少分钟后继续采集,我想其他朋友也可能会遇到此类问题。所以共享出这个插件。

提供数据采集服务联系QQ:664396986



附件:


你只需把写好的插件放在采集器的\Plugins\LocoySpider 目录下面,然后就可以在采集器里面选择使用了,
如下图:
http://faq.locoy.com/Data/Question/WindowsLiveWriter/C_8761/clip_image004_thumb.jpg

在规则的第四步 文件保存及部分高级设置,任务C#插件,那里选择插件,然后点击保存关闭规则,从新打开,才能测试。

kuhabe 发表于 2014-10-27 13:20:29

具体的使用方法呢? 文件放到\Plugins 目录下 ,测试无效。

qyhack 发表于 2014-10-27 13:29:29

kuhabe 发表于 2014-10-27 13:20 static/image/common/back.gif
具体的使用方法呢? 文件放到\Plugins 目录下 ,测试无效。

已经附上插件使用方法

liyicai01 发表于 2014-10-27 19:40:11

非常感谢楼主太给力了

zhansheng2007 发表于 2014-10-27 23:18:26

不清楚   说明是什么

qyhack 发表于 2014-10-28 10:44:20

zhansheng2007 发表于 2014-10-27 23:18 static/image/common/back.gif
不清楚   说明是什么

采集N条数据后就停止采集N分钟,然后再采集   
页: [1]
查看完整版本: 火车头休眠管理插件,可设置采集N条休眠N分钟后继续采集