tearz 发表于 2013-7-31 11:56:38

为什么我把所有网址加入起始网址了,启动采集器还要去采网址再到采内容呢?

我把所有网址加入了起始网址,我只需要采集起始网址里的网页内容,
为什么还要先采网址再到采内容呢?

我直接不选任务的第一个勾,启动却无效!

求教!!!

303718 发表于 2013-7-31 13:31:44

是这样的。虽然添加了网址但还没有到数据库里去。

tearz 发表于 2013-7-31 13:41:52

303718 发表于 2013-7-31 13:31 static/image/common/back.gif
是这样的。虽然添加了网址但还没有到数据库里去。

但是增加进数据库的速度有点慢,有方法快点吗?网址有点多

ak47110 发表于 2013-8-3 22:12:23

先保存为文本,在批量加载到数据库,模拟发布太费vps的流量了

tearz 发表于 2013-8-6 16:46:14

ak47110 发表于 2013-8-3 22:12 static/image/common/back.gif
先保存为文本,在批量加载到数据库,模拟发布太费vps的流量了

嗯,我也想直接写数据库,只是觉得太麻烦了
页: [1]
查看完整版本: 为什么我把所有网址加入起始网址了,启动采集器还要去采网址再到采内容呢?