【火车头V8】标签过滤 不得重复 与循环采集的取舍判断

0631

在采集的时候  一个标签 设置了不能重复
这个标签在网页循环匹配

之后采集的时候 遇到某一页里 有一个内容重复
整页其他循环的 都放弃了。。。

rq204

只要有重复，那是一定会放弃的。因为你是选了添加为新记录的。标签值重复，是不能添加。