找回密码

火车采集器软件交流官方论坛

搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 2561|回复: 3

百度Spider User-Agent字段更新通知

[复制链接]
发表于 2011-7-28 09:18:32 | 显示全部楼层 |阅读模式
各位网站管理员,
     大家好!
    百度网页搜索spider的User-Agent字段内容近期将更新,请大家关注,谢谢!

更换时间:
2011年5月10日
   
更换内容:
baiduspider在爬取网页时,发送请求的User-Agent字段内容将更新。
目前的字段内容是
Baiduspider+(+http://www.baidu.com/search/spider.htm)
更换后的字段内容是
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

更换后您需要做什么:
- 如果您已在robots文件中封禁了百度网页搜索的User-Agent,本次更新不会产生任何影响,也无需修改robots文件。
- 如果您此前主动在服务器端封禁了百度网页搜索的User-Agent,那么建议修改服务器端要封禁的User-Agent字段,或者更换为robots封禁。
- 如果还有其他问题,请通过投诉中心(tousu.baidu.com)联系我们。


谢谢!

百度搜索引擎Spider产品团队


http://tieba.baidu.com/club/9374916/p/10669831



HttpPostGet.exe里边的默认spider字段内容需要修改

评分

1

查看全部评分

发表于 2012-5-29 14:44:33 | 显示全部楼层
如果您已在robots文件中封禁了百度网页搜索的User-Agent,本次更新不会产生任何影响,也无需修改robots文件。
发表于 2012-7-3 10:46:04 | 显示全部楼层
本次更新不会产生任何影响,也无需修改robots文件。
发表于 2016-2-10 18:49:30 | 显示全部楼层
和你们一块学习。。。
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

温馨提示:建议您联系官方定制服务,通过官方支付方式完成支付。您与其他非官方账号发生的交易,我方概不承担责任。网络有风险,交易需谨慎

QQ| 手机版|Archiver| 火车采集器官方站

Copyright © 2001-2013 Comsenz Inc.  Template by Comeings! All Rights Reserved.

Powered by Discuz! X3.4( 皖ICP备06000549 )

快速回复 返回顶部 返回列表