刀客贵人 发表于 2012-11-10 19:11:25

火车头采集数据太慢了

个人认为单任务线程的设置数该设置为100或者更大

最大线程10,实在是太慢了,速度完全跟不上

只是单方面的采集某一个标题,但是线程只有10,蛋疼

求改进

zsaaad 发表于 2012-11-12 17:14:12

同感www.yy168168.com

caijihome 发表于 2012-11-12 17:50:20

我觉得已经很快了
时间间隔也设置下,如果还慢,购买旗舰版本,可以用其他方法

303718 发表于 2012-11-12 18:30:53

对的 购买旗舰版本 速度就超快了

刀客贵人 发表于 2012-11-12 18:54:54

303718 发表于 2012-11-12 18:30 static/image/common/back.gif
对的 购买旗舰版本 速度就超快了

我现在遇到采集问题了

http://bbs.locoy.com/spider-131521-1-1.html

请问这个怎么做

我现在只能采集 以下得之的内容
http://bbs.plu.cn/thread-114466-1-1.html
http://bbs.plu.cn/thread-119694786-1-1.html
http://bbs.plu.cn/thread-1188886-1-1.html

像以下这种该如何采集:
http://bbs.plu.cn/thread-119694786-11-1.html
http://bbs.plu.cn/thread-119694786-12-1.html
http://bbs.plu.cn/thread-119694786-231-1.html


还有个人版的速度有加快吗

lbjyuer 发表于 2016-2-10 17:45:10

和你们一块学习。。。
页: [1]
查看完整版本: 火车头采集数据太慢了