‹‹ 上一主题 | 下一主题 ››
发新话题
打印

[3.2版] 期待火车头研究出有效反防止采集的程序，例如：

hzd888

一代天骄

VIP(标准)用户

Rank: 6Rank: 6

UID
71020 
帖子
134 
活跃度
309 点 
火车车厢
2 节 
注册时间
2007-10-8 
1楼 大 中 小 发表于 2008-4-27 13:15  只看该作者

期待火车头研究出有效反防止采集的程序，例如：

像搜索引擎那样不执行对方的脚本；如何隐藏访问痕迹；无毒且有效代理IP提供租用；等等...

TOP

soarb

高级会员

Rank: 4

UID
28394 
帖子
483 
活跃度
937 点 
火车车厢
47 节 
注册时间
2007-4-26 
2楼 大 中 小 发表于 2008-4-27 13:59  只看该作者
这个现在的火车头就可以，自己用php写个agen
承接火车头　发布模块、接口、插件　任务!
火车头暂不能做到的，我能！
http://shipudaquan.cn/locoy

TOP

sushy

VIP(标准)用户

Rank: 6Rank: 6

UID
73621 
帖子
444 
活跃度
1179 点 
火车车厢
99 节 
注册时间
2007-11-9 
3楼 大 中 小 发表于 2008-4-27 14:03  只看该作者
火车头要是能添加上动态代理功能，就可以突破防采集。

现在火车头只能实现单一代理IP的设置，建议火车头可以导入代理IP列表，可以设置每采集几个更换一个IP，对于代理是否可用，建议导入的时候有测试并过滤出有用代理IP功能。

当然这样可能有点麻烦。

建议火车头支持https。

TOP

hzd888

一代天骄

VIP(标准)用户

Rank: 6Rank: 6

UID
71020 
帖子
134 
活跃度
309 点 
火车车厢
2 节 
注册时间
2007-10-8 
4楼 大 中 小 发表于 2008-4-27 21:07  只看该作者
我不会自己写代码。楼上的朋友，请把具体方法和代码发一个给我，好吗？先谢谢啦！

TOP

红旗

VIP(标准)用户

Rank: 6Rank: 6

UID
18541 
帖子
41 
活跃度
85 点 
火车车厢
0 节 
注册时间
2007-3-23 
5楼 大 中 小 发表于 2008-5-2 17:01  只看该作者
引用:
原帖由 hzd888 于 2008-4-27 13:15 发表
像搜索引擎那样不执行对方的脚本；如何隐藏访问痕迹；无毒且有效代理IP提供租用；等等...
蔑视你

TOP

‹‹ 上一主题 | 下一主题 ››
发新话题
Powered by Discuz! 6.0.0  © 2001-2007 Comsenz Technology Ltd
Processed in 0.194976 second(s), 6 queries, Gzip enabled
当前时区 GMT+8, 现在时间是 2008-7-20 21:41 皖ICP备06000549 清除 Cookies - 联系我们 - 火车采集器官方站 - 静态归档 - WAP