火车采集器软件交流官方论坛

 找回密码
 加入会员
搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 3024|回复: 0

【V8版】大量数据部分选择,存储性能和缓冲处理问题

[复制链接]
发表于 2013-5-22 03:40:26 | 显示全部楼层 |阅读模式
9.大量数据 比如几十万内容 但其中有5千条 内容采空。。。
无法批量选择标签为空的条目,
比如 选择某标签内容为空的项。。。统一设置未采 重新采集

无奈只好逐条点选设置,同时尝试每页显示2W条 。。。
为了方便查看,结果火车单页大量数据的缓冲实在有待提高。。。 好卡

另外:使用中采集95634条数据 数据库占用1665798144字节还没算网址库
计算下来 每条数据占用17K...我感觉 很没有这么大。。。


小建议:在数据库多选处理上增加菜单
提供自动读取标签列表,提供内容为空 ,非空 选项,或者标签列右键 本标签为空的项。。。

至于存储性能。。。技术活,还得高人研究,加油,诸位工程师
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

QQ|手机版|Archiver|火车采集器官方站 ( 皖ICP备06000549 )

GMT+8, 2024-11-23 12:12

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表