采集Url列表，第一页可以采集，后面一直重复

kefeimao · 发表于 2017-9-24 11:20:15

采集https://www.kickz.com/en/shoes/c?selectedPage=*（1-50页）里面产品列表网址。第一页可以采集，采集第二页及后面的产品网址都是重复第一页的，是需要浏览器登陆吗？好像用浏览器登陆了也不行，在规则里面测试就不行了，求解

leweizxl · 发表于 2017-9-25 08:58:31

加上cookie看看吧

kefeimao · 发表于 2017-9-25 09:20:16

有设置cookie,总共有50页，但是为什么只能采集前3页？

kefeimao · 发表于 2017-9-25 09:31:40

列车长有时间帮忙看看吗？

tigexfang · 发表于 2018-1-19 17:30:00

碰到同样的情况，求解

帐号		自动登录	找回密码
密码			加入会员