hxsfcu 发表于 2020-10-29 09:45:13

采集遇到重定向的网址,如何处理呢

各位大神,帮点拨一下,
比如 搜狗微信搜索,链接是搜狗的,点进去会跳转成微信的,   没看出来什么规则

这种问题你们怎么处理的

leweizxl 发表于 2020-10-29 13:36:23

通过列表页的地址,采集跳转后的实际地址,
搜狗微信采集有访问限制,访问多了会出现验证码,
而且跳转后的实际地址也是临时地址,一段时间后就会失效

推荐的方式是使用火车浏览器软件,模拟打开实际页面进行采集
页: [1]
查看完整版本: 采集遇到重定向的网址,如何处理呢