ccnpsrr 发表于 2017-11-6 00:17:24

紧急求助，如何过滤掉重复电话？

在不同的社交网站上抓取了别人的姓名和电话，同一个人会在不同的网站上留电话，如何将多余的相同的电话过滤掉，只留下一条？

leweizxl 发表于 2017-11-6 09:40:06

可以考虑插入同一个数据库中做字段唯一性设置

baiduzd 发表于 2017-11-6 20:50:55

用简单的方法 就是号码标签 设置不得重复采集完编辑任务换个网址继续采集也不会采集重复的，在一个数据库

有偿解决火车头各类问题 写规则 等Q 2097-888-311

ccnpsrr 发表于 2017-11-6 23:44:46

leweizxl 发表于 2017-11-6 09:40
可以考虑插入同一个数据库中做字段唯一性设置

刚接触火车头没多久，用的是免费版，一是不知道怎么设置，二是这种设置需不需要版本支持？望大神解答。

leweizxl 发表于 2017-11-7 09:16:26

ccnpsrr 发表于 2017-11-6 23:44
刚接触火车头没多久，用的是免费版，一是不知道怎么设置，二是这种设置需不需要版本支持？望大神解答。 ...

数据库可以用access

Img 发表于 2018-2-8 16:47:11

设置采集的字段不能重复

页: [1]
查看完整版本: 紧急求助，如何过滤掉重复电话？