biangs 发表于 2009-4-1 15:57:40

采集第1页有的网址在第2也还会出现。这样采集的变成重复

如题,一般采集都会有10%的重复、如果每页10条地址的话。这样算不算bug,或者有什么办法改规则。我采集的是阿里妈妈淘客

wwwpsk 发表于 2009-4-1 16:24:58

选定区域采集,那样就不会重复采集旁边的推荐文章了

biangs 发表于 2009-4-1 16:30:19

如果变化没有规律的呢。那样会少采

wwwpsk 发表于 2009-4-1 21:02:58

在文章列表区域的就不可能有重复的,呵呵
页: [1]
查看完整版本: 采集第1页有的网址在第2也还会出现。这样采集的变成重复