重复采集问题(已勾选“重复选项”)
本帖最后由 放飞机 于 2011-6-18 16:52 编辑这是我需要采集的地址:
http://www.yp.net.cn/schinese/Localize/LocalizeSearch.asp?Province=26
需要在上面的页面上获取连接后,再进入连接进行采集,而内容页面是多个分页。
我在火车头里能获取到地址,能采集到信息,可是它总是采集到一个页面的最后一页就会停在那里,还一直地采集,不会跳到其他页面继续采集,造成大量数据重复,严重影响采集速度
所以来论坛请教该怎么设置才可以避免这种情况发生。 取消勾选不就行了?
页:
[1]