论坛 › 采集器基础使用讨论区 › 超大量网页采集怎么导入？

cuiyang1992 发表于 2014-9-8 13:59:00

超大量网页采集怎么导入？

第一步采集网址规则里面需要导入大量网址大概有70w页。
用记事本导入后 点发布任务 没反应。

cuiyang1992 发表于 2014-9-8 13:59:34

是一共有70w条地址信息

303718 发表于 2014-9-8 14:06:02

分成多个文件导入。

cuiyang1992 发表于 2014-9-8 14:09:20

303718 发表于 2014-9-8 14:06 static/image/common/back.gif
分成多个文件导入。

大概一个文件多少行数据？新手没有经验 。谢谢了

303718 发表于 2014-9-8 14:12:25

5万一个。一个一条规则。

查看完整版本: 超大量网页采集怎么导入？