起始网址数量过多无法保存任务

xielipingxi · 发表于 2009-8-4 13:57:45

当添加起始网址采用多条网址（一行一个）的方式时，网址如果数量过多无法保存，对于一些长一点的网址两千个就保存不了了。

rq204 · 发表于 2009-8-4 14:42:00

以前老版本用的默认设置.多的话你用文本导入.

aven · 发表于 2009-8-4 16:19:19

文本导入是正确的

309969755 · 发表于 2012-7-10 09:56:55

rq204 发表于 2009-8-4 14:42
以前老版本用的默认设置.多的话你用文本导入.

请问文本导入最大支持多大的txt文本啊？我有百万级的网址要采，txt文本70m左右，用V7.4，总是任务“开始运行”后就没反应了，进度条也不动

rq204 · 发表于 2012-7-10 10:21:40

309969755 发表于 2012-7-10 09:56
请问文本导入最大支持多大的txt文本啊？我有百万级的网址要采，txt文本70m左右，用V7.4，总是任务“开始运 ...

您的网址很多，所以生成网址时会非常慢。如果使用sqlite,mysql,sqlserver程序就可以使用事务，生成网址速度会很快。

lcmarrio1 · 发表于 2012-7-20 17:35:56

土办法，把你要做的页面列表做成若干个html文件，然后用这些文件作为起始地址，开始采集就行了

帐号		自动登录	找回密码
密码			加入会员