liuyunfei 发表于 2016-6-29 10:51:04

求POST分页，现最多只能采两页，再多页便重复！



此类网站，通过用ASPXPOST方式，最多可以采两页，即使设置多页，也是两页内容，两页以后就与第一页第二页重复，谁能告诉我这种如果要采3-10页或更多页，怎么处理呢？试过用POST方式获取列表，抓包发送POST随机值也没成功。

链接如下：http://bidding.sinopec.com/tpfront/CommonPages/searchmore.aspx?CategoryNum=004001

非常感谢！！！

x-kith 发表于 2016-7-13 16:58:52

我把COOKIE还有USER-AGENT填好，没出现过这个情况，如果没填，采集多少页都是显示第一页内容。

learence 发表于 2016-7-14 09:08:03

没设置对，我测试了可以采集到全部的
页: [1]
查看完整版本: 求POST分页，现最多只能采两页，再多页便重复！