火车采集器软件交流官方论坛

 找回密码
 加入会员
搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 1973|回复: 3

主页和分页有同样的版块重复的内容,如何过滤

[复制链接]
发表于 2013-3-3 12:36:02 | 显示全部楼层 |阅读模式
RT,将主页和分页同样版块的重复内容过滤掉,有办法吗
发表于 2013-3-3 14:33:15 | 显示全部楼层
以后提问请尽量举例,没看明白你的意思,如果是同样内容的话,直接选该内容不得重复不就行了?
发表于 2013-3-4 12:31:06 | 显示全部楼层
连接网址如果是一样的,采集器默认是不会重复采集的
发表于 2013-3-4 13:20:07 | 显示全部楼层
两种情况:
1.内容地址一致,在第一步勾选检测重复就不会重复采集了
2.内容地址不一样,采集内容一样,在第二步选中标签点击修改,在数据处理那有个内容过滤,勾选该标签采集结果不得重复
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

QQ|手机版|Archiver|火车采集器官方站 ( 皖ICP备06000549 )

GMT+8, 2025-7-10 00:21

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表