服务器判断浏览器版本而不能采集数据的问题！

neij_lw · 发表于 2007-1-16 11:50:22

刚才注册，等了0.2小时终于可以发贴了，呵呵！
最近试用火车头3.0，感觉不错，就是有点占内存，可能这个问题也引起了作者的注意，希望能早日解决。
还有一个问题就是如果要采集的数据所在的网站服务器判断了访问软件是否是浏览器，如果使用浏览器访问，打开没有问题，但是使用“火车头”，问题就出来了，采集不到任何数据。后来自己写一个桌面程序试了一下，直接使用socket访问也读取不到数据，但在socket向服务器发送数据时加上HTTP协议的浏览器信息报头就能正常读取到数据，由此发现：“火车头”的采集存在一个没有发送浏览器的数据报头到服务端的问题。
本人是使用的JAVA测试的，在request里设置了一个属性：request.setProperty(".......")，这样就能读取到了，我不知道.net里如何设置这个东西，希望作者能尽快把这个bug修正了。

前段时间想自己写一个采集器的，但发觉“火车头”的功能已经很强大了，就省去这些时间而直接使用了“火车头”。

如果还没有把问题描述清楚，请给我发邮件讨论：neij_lw@126.com

xyyfx · 发表于 2007-1-16 13:56:11

高人!学习中……向你学习，向火车头学习………………支持火车！！哈哈

xyyfx · 发表于 2007-1-16 13:58:19

你所指的不能采集的地址是哪里啊？？搞出来我们学习下呀！

neij_lw · 发表于 2007-1-17 16:46:27

嘿嘿，不太方便说，要引起误会

你看大众点评的，我想采集里面的评论信息。

xyyfx · 发表于 2007-1-17 23:39:53

:L 唉…………我们学习的机会都没有！！高手就是高手！！！

neij_lw · 发表于 2007-1-19 10:36:25

不知道作者什么时候能把这个bug给修正了，严重期待！

neij_lw · 发表于 2007-1-19 10:41:30

网上找了一个，有这个资料：
http://blog.csdn.net/chinawn/archive/2005/08/12/452883.aspx

neij_lw · 发表于 2007-2-2 13:58:56

老大怎么不回复我这个问题啊？

帐号		自动登录	找回密码
密码			加入会员