论坛 › BUG报告 › 起始网址数量过多无法保存任务

xielipingxi 发表于 2009-8-4 13:57:45

起始网址数量过多无法保存任务

当添加起始网址采用多条网址（一行一个）的方式时，网址如果数量过多无法保存，对于一些长一点的网址两千个就保存不了了。

rq204 发表于 2009-8-4 14:42:00

以前老版本用的默认设置.多的话你用文本导入.

aven 发表于 2009-8-4 16:19:19

文本导入是正确的

309969755 发表于 2012-7-10 09:56:55

rq204 发表于 2009-8-4 14:42 static/image/common/back.gif
以前老版本用的默认设置.多的话你用文本导入.

请问文本导入最大支持多大的txt文本啊？我有百万级的网址要采，txt文本70m左右，用V7.4，总是任务“开始运行”后就没反应了，进度条也不动

rq204 发表于 2012-7-10 10:21:40

309969755 发表于 2012-7-10 09:56 static/image/common/back.gif
请问文本导入最大支持多大的txt文本啊？我有百万级的网址要采，txt文本70m左右，用V7.4，总是任务“开始运 ...

您的网址很多，所以生成网址时会非常慢。如果使用sqlite,mysql,sqlserver程序就可以使用事务，生成网址速度会很快。

lcmarrio1 发表于 2012-7-20 17:35:56

土办法，把你要做的页面列表做成若干个html文件，然后用这些文件作为起始地址，开始采集就行了:lol

查看完整版本: 起始网址数量过多无法保存任务