因为要采集好多规则 总会有重复的文章可以直接过滤掉吗？ 发的时候过滤。

如题，有什么方法吗？ ip地址数据库 或者手机归属地数据库怎么采集啊

{"total":"2557","data":[{"contentid":"39957","catid":"274","modelid":"1","title":"%u5bfc%u81f4%u767d%u8840%u75c5%u7684%u539f%u56e0","color":"","thumb":"","tags"...

请问怎么采集人才网简历数据，简历如何采集

郑州景安云空间独立ip,多站点建立更划算，超大流量，基于云平台架构更稳定，BGP多线机房，更快速 真心好空间，景安不简单啊！！查看详情：http://www.zzidc.com/main/yunkj...

起始页是这样的http://www.tlxxw.com/gqxx/Showhome.asp 一点求购房屋 或者出租房屋 点按分类显示 就显示下面的字符网址 ，然后直接浏览器上输入下面网址 就不分类显示，...

Job Title: Project Architect / Base Building Architect Office Location: New York, NY

我在这个网址http://www.xiexingcun.com/xy1/ShowSoft.asp?SoftID=21217下载软件，查看他的源代码，“下载地址1”的链接地址是这样的 下载地址1  提示：直接点击...

共找到需要发布的内容297条... 发布内容全部完成√ ,载入内容297条;Web发布成功0条,Web发布失败0条;

刚用最新版采集器，发现图片不能用迅雷下载，什么原因呢？

我是旗舰版，用php插件偶然发现这个bug，测试方法1、随便建立一个任务，起始网址随便输入一个，我输的是百度网址； 2、采集内容规则随便留一个标签“标题”，选“自定义固...

采集内容规则都测试成功，但是在保存文章时没有内容只有文章标题，这是什么情况？求指教！

请问火车头可以调用com吗？

win7 64位旗靓版 加密狗版自动退出，问题解决不了，换xp系统，电脑双系统， 同一任务配置什么都没改。xp下，采集速度慢了n倍。线程那里没变，速度间隔是400 ，win7采集速度...

他的分页代码是 document.write(fenye()); JS的 怎么采规则啊. 帮帮

http://www.bloghub.com/Detailed/557625.html 这个页面的 “Visit Where To Get The Best Cooking Classes In Toronto 's Homepage” 这里，链接是转向的，但火车头探测不...

QQ:2239001993 价格好商量

就相当于站群功能了，无须写规则的原理是什么？ 能不能用于其他模型