火车采集器软件交流官方论坛

 找回密码
 加入会员
搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 2622|回复: 3

求助

[复制链接]
发表于 2016-6-30 10:31:17 | 显示全部楼层 |阅读模式
请各位大侠帮助:
我在用火车头采集器采集一个旅游分销网站:网址http://www.lvyouquan.cn/index.aspx 登录账号密码:公众登录账号:lvyouquan 密码:888888;
采集页面http://nj.lvyouquan.cn/Product/N ... commendproductmore2,由于网站采用异步请求,需要使用post分页请求网站。根据Fiddler抓包获得的起始页数据:POST http://nj.lvyouquan.cn/Product/AjaxResultData HTTP/1.1。
问题一:这各网址与我需要采集的首页http://nj.lvyouquan.cn/Product/N ... commendproductmore2  不同,我该使用哪个网址作为起始页?两个我都试过都没成功
问题二:采集的数据包如下
jsonData=%7B%22CurrentPageIndex%22%3A%224%22%2C%22KeywordType%22%3A1%2C%22OrderField%22%3A%220%22%2C%22OrderDirection%22%3A%221%22%2C%22IsConfirmGroup%22%3Afalse%2C%22IsConfirmStockNow%22%3Afalse%2C%22IsPreSaleSchedule%22%3Afalse%2C%22SearchKey%22%3A%22%E6%AC%A7%E6%B4%B2%22%2C%22LineType%22%3A%220%22%2C%22IsReMai%22%3Afalse%2C%22IsTeJia%22%3Afalse%2C%22IsLiRun%22%3Afalse%7D 数据里面的蓝色数字4是第四页,也是网站分页。蓝色数字不同设置post设置分页,

但是采集结果除了首页有数据,第二第三及之后的分页都没采集到下一级网址

请各位大侠帮助


发表于 2016-7-4 16:47:43 | 显示全部楼层
可以转换下编码看看

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?加入会员

x
发表于 2016-7-4 16:48:47 | 显示全部楼层
网站防采集的情况有点厉害,可以考虑使用火车浏览器试试
 楼主| 发表于 2016-7-5 22:28:25 | 显示全部楼层
leweizxl 发表于 2016-7-4 16:48
网站防采集的情况有点厉害,可以考虑使用火车浏览器试试

恩 ,问题解决了 多谢了!
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

QQ|手机版|Archiver|火车采集器官方站 ( 皖ICP备06000549 )

GMT+8, 2024-11-25 00:30

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表