为什么火车头采集会Forbidden

1054603736 · 发表于 2017-2-4 11:58:29

火车头采集为什么会出现这个问题是目标网站的问题还是本网站的问题？

leweizxl · 发表于 2017-2-4 12:33:35

是网址的问题网址应该是访问失败可以用fiddler抓包下看看

1054603736 · 发表于 2017-2-4 13:59:49

leweizxl 发表于 2017-2-4 12:33
是网址的问题网址应该是访问失败可以用fiddler抓包下看看

网站能正常访问

leweizxl · 发表于 2017-2-4 14:16:13

1054603736 发表于 2017-2-4 13:59
网站能正常访问

用fiddler检查一下

303718 · 发表于 2017-2-4 14:23:04

出这个一般都是被限制IP了

1054603736 · 发表于 2017-2-4 14:51:26

303718 发表于 2017-2-4 14:23
出这个一般都是被限制IP了

换了IP一样是不能采集的