火车采集器软件交流官方论坛

 找回密码
 加入会员
搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 1861|回复: 3

在线等~同样网址 重复入库 求助 内详

[复制链接]
发表于 2008-11-16 22:16:29 | 显示全部楼层 |阅读模式
设置 每一个循环 添加为新记录

这样  相同网址就过滤无效了


每次都重复发以前发过的东西


现在求助:1,可否禁止  循环的网址重复?   2, 可否禁止重复的标题发布??


在线等 谢谢
发表于 2008-11-16 22:24:17 | 显示全部楼层
不行的,新记录是在循环匹配的时候去匹配的,这样怎么去检查重复的网址呢?检查重复的网址都是在刚开始的时候那些网址去检查的。
 楼主| 发表于 2008-11-16 22:34:44 | 显示全部楼层
恩 了解了 我换了个方法

直接从二级深度入手

谢谢版主的答复
 楼主| 发表于 2008-11-16 22:35:47 | 显示全部楼层
我采集的是  视频网站   只有第一页有 介绍和缩略图

所以我需要 给 第一页西面的分页  匹配第一页的参数

如果用二级就没有第一页的参数了

有得必有失。。。。

放弃了。。
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

QQ|手机版|Archiver|火车采集器官方站 ( 皖ICP备06000549 )

GMT+8, 2025-5-21 08:11

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表