hongtong 发表于 2016-4-26 00:59:45

采集大快了，有什么办法等待加载完成再采集吗

采集大快了，有什么办法等待加载完成再采集吗？我采集的是国外网站，访问速度很慢，没等加载完成就采了几个网页。求回复！！

老雷 发表于 2016-4-26 01:40:08

http://i2.piimg.com/81aaf9fdeda3a6ac.png

老雷 发表于 2016-4-26 01:38:43

http://mp.weixin.qq.com/mp/getverifyinfo?__biz=MzA3NTEyMDcyNA==&uin=MjYzMTY1NTg4MA%3D%3D&key=b28b03434249256beb9150a6057988cced71437eb428e5c46cb260c7c2614dca49bc7aa220b8a0b3fbbc5566eb310b02&devicetype=iPhone+OS9.3.1&version=16031011&lang=zh_CN&nettype=WIFI&fontScale=100&pass_ticket=js7Y8N4CTt6dta61PgaYZ4Rj1q0E3mQDW0TOXgZvJfrp%2F5ye13%2BmeyuQdLZ6aJzW

线程调成1 间隔调到能全部加载完毕。

hongtong 发表于 2016-4-26 02:20:19

老雷 发表于 2016-4-26 01:40


:hug:谢谢谢谢谢谢！！！

hongtong 发表于 2016-4-26 17:19:51

设置多少也一样，能采集的内容，网速为8KB，不能采集的内容网速为4KB，不知为什么。。。

billowye 发表于 2016-4-27 21:45:02

要强制刷新网页，不缓存

hongtong 发表于 2016-4-28 15:11:15

billowye 发表于 2016-4-27 21:45
要强制刷新网页，不缓存

请教哪里设置？

hongtong 发表于 2016-5-10 11:50:59

老雷 发表于 2016-4-26 01:38
线程调成1 间隔调到能全部加载完毕。

老雷，我这个原因是还没有加载完成就采集，这个问题能解决吗？

老雷 发表于 2016-5-13 16:16:05

hongtong 发表于 2016-5-10 11:50
老雷，我这个原因是还没有加载完成就采集，这个问题能解决吗？

那您可以试试，看下 目标站，加载完页面，大概的加载时间。您是采国外站吧？国内的，很少碰到。

hongtong 发表于 2016-5-27 21:27:08

本帖最后由 hongtong 于 2016-5-27 21:28 编辑

老雷 发表于 2016-5-13 16:16
那您可以试试，看下 目标站，加载完页面，大概的加载时间。您是采国外站吧？国内的，很少碰到。 ...
不好意思，没空上来。
目标站是国外的，加载大概在15秒内。有时候能采到，有时候采到是空的，采集器里的“提取内容为空？”的功能也不好使。
采集器上设置的时间是采集后等待时间，可惜不能设置加载中等待。
页: [1]
查看完整版本: 采集大快了，有什么办法等待加载完成再采集吗