遇到个大问题,火车开太久开不动了......
从昨天一直开到今天,本来1秒能采一个,现在1分钟才采下一个,,,,,这个是怎么回事啊?整台火车都不怎么动了,cpu占用率也不高,内存也才150m
网络也很通畅,这下子停也不能停,因为同时进行3个任务,分别在采网址、采内容、发内容……可就是老半天才动一下 同样的问题 完了,现在火车真正卡住了,10分钟过去了…… ACC数据库负载问题,请单任务采集数据不要太多 我的是采集没问题,发布不上去,速度超级慢!发布本地跟网站都一样。 请问不要太多的标准是多少?
1万、3万、还是5万以上 四处查询access的最大负载量未果,根据各种信息推测,暂且定为每个任务采集5000条数据应该没问题。
可怜,我可是有35万数据要采,这下只好分成70个任务进行了 是啊,现在我也是分了n个任务来采集,access实在太垃圾了 期待新版采用sql lite的效果,哎,我要采集的数据太多了,几十万
页:
[1]