火车采集器软件交流官方论坛

 找回密码
 加入会员
搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 2261|回复: 0

网站抓取连接的问题,可能是cookie引起的

[复制链接]
发表于 2011-6-29 20:17:59 | 显示全部楼层 |阅读模式
目标网站www.24quan.com  目的,采集到每个城市下面【往期推荐】每一页的数据,分页,标签都做好了。但是在采集的时候出现问题

网站是按城市来分类

比如我首先的登陆北京的首页,地址是 http://www.24quan.com/bj.html
北京的往期推荐,地址是 http://www.24quan.com/bj/deals.html

如果这时候我要换成看上海的往期推荐数据,直接输入 http://www.24quan.com/sh/deals.html
显示出来的是北京的往期推荐的数据

必须要在浏览器上先执行一次 http://www.24quan.com/sh.html
再执行 http://www.24quan.com/sh/deals.html


这样才能正常跳转到sh的往期推荐页面。。

查看cookie,发现里面有个city的ID在变化。。。现在不知道这在火车头上要怎么操作,才能正常采集到我要的数据

求教论坛各位大大。。。help~~~~~~~~~~~

2010sp3
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

QQ|手机版|Archiver|火车采集器官方站 ( 皖ICP备06000549 )

GMT+8, 2025-8-27 13:35

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表