dancecat 发表于 2008-10-15 09:34:14

是不是3.2版本的.采集数据不能超过2万条.我采3万8千条数据,就出错

我用的版本是 火车采集器V3.2 SP2版   最后更新2007-09-26

SpiderResult.mdb里有3万8千多条数据.采了一晚上.第二天来看.只采了1万8千条数据就卡在那里不走了!剩下的没有数据!

sushy 发表于 2008-10-16 21:57:14

我最多采集37000条数据,一共500M,1.2亿汉字字符。

yan24519 发表于 2008-10-17 09:58:16

真是强大








http://p8.images22.51img1.com/6000/qwb654/852fad10dd443bb0292fff0ca514f90d.gif
魔王神官和勇者美少女
仙墓中走出的强者

chenfy 发表于 2008-10-17 10:31:16

我用3.2版的一下采2万,不过就是会慢点。

cofcn 发表于 2008-10-17 12:36:40

现在SP5喝上一个版本可以,我最多的时候,一个任务采集了7万多文章。

尝试采集过10万的数据,就没法运行了,到了7万左右就死活不动弹了。估计7-8万是极限

sushy 发表于 2008-10-17 13:14:42

access最多限制2G数据量,只要不超过该数字,应该都可以跑的,不过由于火车入库可能就慢很多,因为有那么多数据要检索。
页: [1]
查看完整版本: 是不是3.2版本的.采集数据不能超过2万条.我采3万8千条数据,就出错