kefeimao 发表于 2017-9-24 11:20:15

采集Url列表,第一页可以采集,后面一直重复

采集https://www.kickz.com/en/shoes/c?selectedPage=*(1-50页)里面产品列表网址。第一页可以采集,采集第二页及后面的产品网址都是重复第一页的,是需要浏览器登陆吗?好像用浏览器登陆了也不行,在规则里面测试就不行了,求解

leweizxl 发表于 2017-9-25 08:58:31

加上cookie看看吧

kefeimao 发表于 2017-9-25 09:20:16

有设置cookie,总共有50页,但是为什么只能采集前3页?

kefeimao 发表于 2017-9-25 09:31:40

列车长有时间帮忙看看吗?

tigexfang 发表于 2018-1-19 17:30:00

碰到 同样的情况,求解
页: [1]
查看完整版本: 采集Url列表,第一页可以采集,后面一直重复