百万数量级的采集，有人搞过么？

qianglong · 发表于 2011-4-21 13:36:40

回复 6# 枫阅翘佳人

设置采集间隔时间

枫阅翘佳人 · 发表于 2011-4-22 16:56:16

[img][/img]谢谢啊

imtos · 发表于 2011-4-23 13:05:11

回复 12# 枫阅翘佳人

额可以用随机代理~~封IP我就换这招百试不爽
上千代理随机换,10ms间隔
只要你宽带和电脑配置OK 采集速度超猛的

zyj33 · 发表于 2011-4-23 16:17:20

那几天几夜都采不完

fsen1215 · 发表于 2011-4-23 18:58:46

回复枫阅翘佳人

额可以用随机代理~~封IP我就换这招百试不爽
上千代理随机换,10ms间隔
只要你宽带 ...
imtos 发表于 2011-4-23 13:05

怎么样解决随机代理啊?去买代理IP?

dht9910 · 发表于 2011-4-24 08:35:28

那千万的要多久啊我晕死

imtos · 发表于 2011-4-26 17:02:30

回复 15# fsen1215

找免费代理软件啊~
然后导出txt文本
略微修改下再导入火车头
你在论坛找找或者去问问客服导入火车头的格式

ZWH959 · 发表于 2011-6-14 14:35:42

我用的商业版本的感觉跟免费差不多

ytfpguu · 发表于 2011-6-22 21:34:00

这么多有什么技术呀。