火车采集器软件交流官方论坛

 找回密码
 加入会员
搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 4475|回复: 7

采集的时候程序到底要吃掉多大的内存才够?

[复制链接]
发表于 2007-5-11 16:42:30 | 显示全部楼层 |阅读模式
我采集一个纯文本的结构数据,才3千条程序就占用三百多兆,如果采集几十万的数据量,那要多少内存才够,程序会不会崩溃?

[ 本帖最后由 ember 于 2007-5-11 16:43 编辑 ]
发表于 2007-5-11 18:10:23 | 显示全部楼层
就现在的版本而言,一般采集几千就要关闭程序,结束火车头的进程,重新启动火车头接着采......
发表于 2007-5-11 21:33:20 | 显示全部楼层
虚拟内存和物理内存各600  我的最高纪录
发表于 2007-5-12 20:14:57 | 显示全部楼层
需要优化一下程序,赫赫。
比如采集部分就放到硬盘上,并释放相应内存。等等。。。。
发表于 2007-5-12 20:27:15 | 显示全部楼层
采完几千条就要关掉火车。整理下内存。再打开继续采 :L
 楼主| 发表于 2007-5-12 22:39:42 | 显示全部楼层
几千条就要重开?我计划采集138万条记录,要重启程序几次啊?
 楼主| 发表于 2007-5-12 22:42:06 | 显示全部楼层
顺便请教4楼,优化程序如何做?
发表于 2007-5-12 22:51:47 | 显示全部楼层
原帖由 ember 于 2007-5-12 22:42 发表
顺便请教4楼,优化程序如何做?


释放程序占用的系统资源.火车目前需要改善的.  再加上C#本身运行速度就比C++慢.
说实在的.采集器应该不会占用这么多资源的.:)
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

QQ|手机版|Archiver|火车采集器官方站 ( 皖ICP备06000549 )

GMT+8, 2025-7-20 16:52

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表