放飞机 发表于 2011-6-18 16:43:32

重复采集问题(已勾选“重复选项”)

本帖最后由 放飞机 于 2011-6-18 16:52 编辑

这是我需要采集的地址:
http://www.yp.net.cn/schinese/Localize/LocalizeSearch.asp?Province=26


需要在上面的页面上获取连接后,再进入连接进行采集,而内容页面是多个分页。


我在火车头里能获取到地址,能采集到信息,可是它总是采集到一个页面的最后一页就会停在那里,还一直地采集,不会跳到其他页面继续采集,造成大量数据重复,严重影响采集速度


所以来论坛请教该怎么设置才可以避免这种情况发生。

272070210 发表于 2011-6-18 17:13:10

取消勾选不就行了?
页: [1]
查看完整版本: 重复采集问题(已勾选“重复选项”)