用POST批量采集网址,每次都只能采到第一页?
本帖最后由 zibinghy 于 2009-10-22 14:23 编辑以前用GET可以批量采集网址,现在用POST批量采集网址,每次都只能采到第一页,不知道为什么,请高手们指点一下。
PS:对于“[分页]标签从__页到__”的作用不是很明白,只是发现如果不填“从0页到0页”的话,就会把相同的内容重复采集,请高手们给说明一下它的作用。
贴出几张截图,方便大家了解我说的情况:
1.HTTP获取方式:POST;批量地址;分页标签从0到0;
2.采集结果:只采到第一页,其他都没有
3.HTTP获取方式:POST;批量地址;分页标签从1到3;
4.采集结果:采集到3页,但采集网址重复
你写的post有问题 所以采集不到其他页面 本帖最后由 zibinghy 于 2009-10-22 15:54 编辑
你写的post有问题 所以采集不到其他页面
专业收费采集 发表于 2009-10-22 15:04 http://bbs.locoy.com/images/common/back.gif
那这个POST的值应该怎么写啊?看过一篇帖子,“post方式获取列表是怎么搞的”,说“找post的cookie的值”,是这个意思么?按我的理解我把登陆时自动获取的cookie值填到“发送的数据”框里,结果还是只采到第一页,看来我的理解是错的。请指点下是怎么回事吧。 的post有问题 不是postcookie
页:
[1]