xiaoxiaohao 发表于 2019-1-31 15:46:56

大众点评采集电话,反爬严重,怎么办?

大众点评列表页数据随便搞,但是请求内页的时候会出现问题,出现403。

http请求已经写全;
使用代理ip没用,还是会出现403;
降低采集速度,8秒请求一次,还会出现滑动验证码;

有搞定的吗?

zwlking 发表于 2019-2-4 10:50:58

这个问题是可以解决的,解决的方案就是加速采集,然后换ip。用真实ip进行采集。

xiaoxiaohao 发表于 2019-2-12 14:38:45

zwlking 发表于 2019-2-4 10:50
这个问题是可以解决的,解决的方案就是加速采集,然后换ip。用真实ip进行采集。 ...

拨号vps上拨号切换ip 能行吗?
页: [1]
查看完整版本: 大众点评采集电话,反爬严重,怎么办?