紧急求助，如何过滤掉重复电话？

ccnpsrr · 发表于 2017-11-6 00:17:24

在不同的社交网站上抓取了别人的姓名和电话，同一个人会在不同的网站上留电话，如何将多余的相同的电话过滤掉，只留下一条？

leweizxl · 发表于 2017-11-6 09:40:06

可以考虑插入同一个数据库中做字段唯一性设置

baiduzd · 发表于 2017-11-6 20:50:55

用简单的方法就是号码标签设置不得重复采集完编辑任务换个网址继续采集也不会采集重复的，在一个数据库

有偿解决火车头各类问题写规则等Q 2097-888-311

ccnpsrr · 发表于 2017-11-6 23:44:46

leweizxl 发表于 2017-11-6 09:40
可以考虑插入同一个数据库中做字段唯一性设置

刚接触火车头没多久，用的是免费版，一是不知道怎么设置，二是这种设置需不需要版本支持？望大神解答。

leweizxl · 发表于 2017-11-7 09:16:26

ccnpsrr 发表于 2017-11-6 23:44
刚接触火车头没多久，用的是免费版，一是不知道怎么设置，二是这种设置需不需要版本支持？望大神解答。 ...

数据库可以用access

Img · 发表于 2018-2-8 16:47:11

设置采集的字段不能重复