post的分页简单说明~~~

leejunji · 发表于 2012-9-5 10:36:34

本帖最后由 leejunji 于 2012-9-5 11:09 编辑

大家在采集列表分页的时候会遇到，点击下面的分页页面内容是改变了，但是浏览器地址却没有改变，

是吧好奇怪是吧，是的，好奇怪，这个种情况分页是post的方式，今天我们来说下这个种情况该如何获取分页

用这个网址来做例子http://www.yidianda.com/category/two/1-7.html

首先你要选项下用fiddler抓包教程这里好好看看一定要会用要不然下面就没有办法做了http://bbs.locoy.com/spider-107387-1-1.html 这个是简单的教程只要帖子里说的会用就可以了如果你要学习具体的可以在论坛搜索这方面的教程这里自行解决

这里假设你已经掌握了 fiddler的使用了我们开启fiddler然后点击下面的分页看下fiddler都抓到了什么

我们点击第三页和第5页抓包看看分别获取什么

说明如上图这样比较不好比较我们把结果保存的文本中来比较就很方便了用按钮“View in Notepad” 把结果保存到文本中来比较

按照上图的说明我们找到ec_p的值就是分页，这里大家明白了吧

ec_crd=32&ec_p=5&id=1&pid=7&flag=1&sortType=&s_keyword=&s_minprice=&s_maxprice=

这些是提交的值那采集器里如何设置呢如下图

我们看到除了ec_p还有比的参数如ec_crd这些那这些是什么呢

我们去页面源代码里找下我们以这个参数为例ec_crd 别的一样处理

这个源代码里的情况我们最终要获取他的值也就是"32" 在采集如何获取呢

采集器里获取在采集器里像这样的参数叫做post随机值

就是这样了我把规则也上传你们如果不清楚可以下载规则对照操作

猫瞳 · 发表于 2012-9-6 09:26:22

有点复杂，看的头大，买了都还在学习阶段

2010ljd · 发表于 2012-9-6 22:53:25

站位回去看看

1496411 · 发表于 2012-9-13 08:48:50

技术帖啊这个得顶一下

pengshaoxie · 发表于 2012-10-22 12:55:04

有点复杂，看的头大，买了都还在学习阶段

生活是那么矫情 · 发表于 2012-11-19 15:33:20

顶一下留下有时间瞅瞅

sd895530 · 发表于 2012-12-4 19:37:17

看不懂啊

sd895530 · 发表于 2012-12-4 20:03:33

好东西好懂了谢谢楼主！

hzd888 · 发表于 2012-12-22 18:02:47

请教版主！http://zfxxgk.ndrc.gov.cn/PublicItemFrame.aspx 怎么抓包？

bysshw · 发表于 2013-2-21 23:19:23

过来看看很好啊

post的分页简单说明~~~

本帖子中包含更多资源