hbcms 发表于 2006-12-4 11:28:21

火车v3.01修正版吃内存问题依然严重(附详细过程截图)

因为HBCMS的采集模块和火车采集器合作,我们要将火车采集器推荐给网友,因此,我对火车采集器V3.01做了多方测试。
主要的问题有:采集1000篇以上的文章,吃内存问题严重,而且不释放内存,导致电脑反应慢或死机


目的:从局域网的A机器 采集2000篇文章 到 局域网的B机器。 注意:只是采集2000篇文章。

机器环境: 2台机器都是512M的内存,在采集过程中,没有做其他的事情。

测试结果:2000篇文章采集时间共约30分钟, 采集的机器总消耗的内存从 350MB上升到 603MB,而且不释放


以下为我在12月4日做的采集过程截图:

打开火车头软件之前的内存情况(共350M)




采集开始,点击任务的开始按钮,屏幕挂住,鼠标失去相应:




等了5分钟,屏幕白屏,无法进行任何操作,只好强行关闭火车头软件



重新开启火车头,选择任务,点击开始,约等了8分钟后,正式的采集终于开始了,请看内存情况(共459M)



采集到850篇文章时的内存情况(共530M)



采集全部完成,内存情况(共603M)



这时候,采集已经完成了。但是内存依然不释放。即使我关闭了采集任务,内容还是不释放。
这样的情况,不可能再进行下一个任务的采集了。


只好关闭火车头软件了,关闭火车后的内存情况(共359M)


[ 本帖最后由 hbcms 于 2006-12-4 11:47 编辑 ]

hbcms 发表于 2006-12-4 11:51:26

如果采集 5000篇文章,花费的时间要大大增加, 点击任务开始按钮,到采集开始,大约要1小时。采集过程也需要约1小时时间,内存使用情况要上升到750MB左右,机器经常性失去响应。特别容易白屏。

因为采集开始就需要1小时左右的时间,经常性的无法正常使用web在线发布文章,估计是登陆已经失效了。 而软件中没有提示,还是继续在做无用的采集(因为已经无法web在线发布文章了)。


不知道其他人的测试结果如何,请告知,谢谢。

[ 本帖最后由 hbcms 于 2006-12-4 11:54 编辑 ]

jac111 发表于 2006-12-5 22:28:07

1G 还够用。。基本上1k篇100m

whoamixp 发表于 2006-12-6 09:40:08

吃内存是大问题

ggid 发表于 2006-12-7 10:31:03

me too

我发过好几次帖了,这次升级版本中加了个释放内存,但却是个摆设,是假释放。释放后10秒钟左右就会恢复到原来的状态。

服务器超时 发表于 2007-1-5 16:24:51

今天我采集1万的数据,内存占到到了800 多M

zhuhan 发表于 2007-1-10 14:48:13

帮你定:D

wolfone 发表于 2007-1-10 20:10:45

我也发发我的看看

我正在采集中

seanhuang 发表于 2007-1-12 08:06:33

森林 发表于 2007-1-20 04:56:33

同样问题
页: [1]
查看完整版本: 火车v3.01修正版吃内存问题依然严重(附详细过程截图)