火车头采集数据太慢了

刀客贵人 · 发表于 2012-11-10 19:11:25

个人认为单任务线程的设置数该设置为100或者更大

最大线程10，实在是太慢了，速度完全跟不上

只是单方面的采集某一个标题，但是线程只有10，蛋疼

求改进

zsaaad · 发表于 2012-11-12 17:14:12

同感www.yy168168.com

caijihome · 发表于 2012-11-12 17:50:20

我觉得已经很快了
时间间隔也设置下，如果还慢，购买旗舰版本，可以用其他方法

303718 · 发表于 2012-11-12 18:30:53

对的购买旗舰版本速度就超快了

刀客贵人 · 发表于 2012-11-12 18:54:54

303718 发表于 2012-11-12 18:30
对的购买旗舰版本速度就超快了

我现在遇到采集问题了

http://bbs.locoy.com/spider-131521-1-1.html

请问这个怎么做

我现在只能采集以下得之的内容
http://bbs.plu.cn/thread-114466-1-1.html
http://bbs.plu.cn/thread-119694786-1-1.html
http://bbs.plu.cn/thread-1188886-1-1.html

像以下这种该如何采集：
http://bbs.plu.cn/thread-119694786-11-1.html
http://bbs.plu.cn/thread-119694786-12-1.html
http://bbs.plu.cn/thread-119694786-231-1.html

还有个人版的速度有加快吗

lbjyuer · 发表于 2016-2-10 17:45:10

和你们一块学习。。。