采集中间老是错误....必然的非自然错误 好像只能用神来解释这个问题

msblast3

同样一个规则发布模块。。。一套设置...
为了避开是发布模块的问题 我把发布加上了发布为html.....所以只要采集成功的 一定会发布在对应的html
我采了一次 有一部分文章采集成功一部分发布未知 察看一下采集生成的html，一些成功的就是采集对了 不成功的 只有莫名其妙的一个数字（是采集没成功把）
然后清空了地址库和本地采集数据....又采一次 也是一部分成功 一部分未知。。。。不过这次成功的几个和第一次不一样 察看html也是成功的正常 失败的一个莫名其妙的数字
第三次。。删除地址库和本地采集数据。。。。依然

3次采集成功和失败的数目项目都不一样.....所以不是规则问题 应该是本地的网速一类的
我在全局设置 把同时最大任务数改为1 超时放弃和重试次数都是最大
然后发布规则里线程改为最小 间隔最大.......可是速度慢了 仍然......出现上面的问题

顺便问下 那个模拟浏览的选项 就是由baidu蜘蛛 google蜘蛛 yahoo蜘蛛 本地浏览器那个有什么区别？？是不是这里出问题了




不过倒是知道什么原因了 大家看这个列表http://dx.3800hk.com/Soft/s1/Index.html 直接用浏览器访问很快 但是采集时候不知道为什么奇曼

[ 本帖最后由 msblast3 于 2008-2-21 20:30 编辑 ]

msblast3

我 自问自答 把  .....大家 可以用 动易自己的 采集功能 再做一个 容易被采集的 模板 先把东西采到动易上再用火车头采到网站上。。。。。