cfl918 2006-4-24 10:42
我想了解火车头的采集速度究竟有多快.一小时可以采集多少篇?
我想了解火车头的采集速度究竟有多快.一小时可以采集多少篇?我以前经常使用的是动易自带的采集系统和火车头相比的速度如何?哪位大侠了解这两个程序?
martinzero 2006-4-25 15:06
当然是火车快了,另外要看目标网站的速度,如果你采网易,5000-7000条,如果你要采我,呵呵,一个也采不走,因为我没站,哈哈
秋天的无名 2006-4-25 21:29
这个关键要看你机器配置和网络情况,我的P41.6,256内存,1M带宽,怎么和别人双核CPU,4G内存, 100M光纤的比阿。
tydn0 2006-9-17 10:30
我用的1.21版,采了10个多小时3500条都没采完。。。来源站和目标站速度都很快(独享100M,独享10M)。。AMD XP1.8, 512M, 80G, 10M光纤,开10个线程,间隔300毫秒。
我发现,一次性如果采的太多,速度会越来越慢。。如果3500条分成7个500条速度会快很多。。可能只要1小时。
qq8qq8qq8 2006-9-17 18:17
[quote]原帖由 [i]martinzero[/i] 于 2006-4-25 15:06 发表
当然是火车快了,另外要看目标网站的速度,如果你采网易,5000-7000条,如果你要采我,呵呵,一个也采不走,因为我没站,哈哈 [/quote]
晕死,没站还说什么呀
cofcn 2007-8-15 21:54
我设置采集7千条,现在已经5个小时了,才采集了不到1000个,晕死,我原来的时候用别的系统采集同样网站的内容,5个小时已经采集了2万多了!!!!!