找回密码

火车采集器软件交流官方论坛

搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 3966|回复: 3

彭博社新闻 很快被反扒发现

[复制链接]
发表于 2018-11-6 14:13:27 | 显示全部楼层 |阅读模式
本帖最后由 jiulianus 于 2018-11-6 16:03 编辑

采集彭博社新闻,还没遍完采集规则,测试时结果上就显示Bloomberg-Are  you a robot? 无法继续测试。添加了Cookie和UA好不容易遍完规则,用单线程,请求速度下调到5000毫秒,只采集30条新闻,但15条以后采集的结果有都是Bloomberg-Are  you a robot?

请问这种情况如何处理?

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?加入会员

x
发表于 2018-11-6 16:25:55 | 显示全部楼层
那就是只能考虑换ip采集了
 楼主| 发表于 2018-11-6 17:46:34 | 显示全部楼层
没有大量采集,只是试了一下就这样。采集器上没有办法通过设置对应吗?
发表于 2018-11-11 08:53:35 | 显示全部楼层
jiulianus 发表于 2018-11-6 17:46
没有大量采集,只是试了一下就这样。采集器上没有办法通过设置对应吗?

除了换ip  直接调节时间间隔
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

温馨提示:建议您联系官方定制服务,通过官方支付方式完成支付。您与其他非官方账号发生的交易,我方概不承担责任。网络有风险,交易需谨慎

QQ| 手机版|Archiver| 火车采集器官方站

Copyright © 2001-2013 Comsenz Inc.  Template by Comeings! All Rights Reserved.

Powered by Discuz! X3.4( 皖ICP备06000549 )

快速回复 返回顶部 返回列表