为什么采集器采集网址很慢有没有加快的方法呢

zx4444 · 发表于 2008-8-27 15:36:55

无论是3.2还是2008 要采集大量数据都要耗费好多时间如果采集一个目标站需要60分钟采集地址就要耗费30-40分钟反而采集内容挺快有没有加快的方法呢

sushy · 发表于 2008-8-27 16:33:13

如果你网速非常快，不是采集的主要影响因素，那么采集网址的时间将是采集内容时间的2倍。原因是采集网址要写入两个数据库中，而采集内容只写一个数据库。

rq204 · 发表于 2008-8-27 16:47:20

选中不要检测重复网址，速度SSS

zx4444 · 发表于 2008-8-27 17:10:59

如果是用TXT导入的地址那是否还要做采集网址的步骤呢如果用导入地址采集网址这步就会将导入的地址写入数据库还是不用选择采集地址直接采集内容在采集内容的时候一起写入数据库呢？

zx4444 · 发表于 2008-8-27 22:18:49

试了一下发觉导入的方式在导入地址的时候非常非常的卡

帐号		自动登录	找回密码
密码			加入会员