falchion 发表于 2014-1-9 22:13:10

多页采集的时候获取网页内容失败，重试中请求页面

多页采集的时候获取网页内容失败，重试中请求页面 ，这个问题是时好时坏的，有的时候能采集 ，有的时候就获取失败，这个到底是怎么回事呢？怎么设置就不会失败了？





303718 发表于 2014-1-10 08:48:01

有可能是网速问题或者访问太频繁IP被限制了

falchion 发表于 2014-4-22 11:02:20

我知道了之前是模拟谷歌的蜘蛛   改成本地ie不模拟蜘蛛就好了
页: [1]
查看完整版本: 多页采集的时候获取网页内容失败，重试中请求页面