采集大快了，有什么办法等待加载完成再采集吗

hongtong

采集大快了，有什么办法等待加载完成再采集吗？我采集的是国外网站，访问速度很慢，没等加载完成就采了几个网页。求回复！！

老雷

老雷

线程调成1 间隔调到能全部加载完毕。

hongtong

老雷 发表于 2016-4-26 01:40

谢谢谢谢谢谢！！！

hongtong

设置多少也一样，能采集的内容，网速为8KB，不能采集的内容网速为4KB，不知为什么。。。

billowye

要强制刷新网页，不缓存

hongtong

billowye 发表于 2016-4-27 21:45
要强制刷新网页，不缓存

请教哪里设置？

hongtong

老雷 发表于 2016-4-26 01:38
线程调成1 间隔调到能全部加载完毕。

老雷，我这个原因是还没有加载完成就采集，这个问题能解决吗？

老雷

hongtong 发表于 2016-5-10 11:50
老雷，我这个原因是还没有加载完成就采集，这个问题能解决吗？

那您可以试试，看下 目标站，加载完页面，大概的加载时间。您是采国外站吧？国内的，很少碰到。

hongtong

老雷 发表于 2016-5-13 16:16
那您可以试试，看下 目标站，加载完页面，大概的加载时间。您是采国外站吧？国内的，很少碰到。 ...

不好意思，没空上来。
目标站是国外的，加载大概在15秒内。有时候能采到，有时候采到是空的，采集器里的“提取内容为空？”的功能也不好使。
采集器上设置的时间是采集后等待时间，可惜不能设置加载中等待。