请问新版本采集论坛用户名时然后排除已采集过的？

嗜血狼魂

请问新版本采集论坛用户名时然后排除已采集过的？

我在采MOP的用户名
请问然后排除采集一个贴里的重复内容？
例如：

我在我闪亮
某人左右
邦可邦卡
雨牧
雨牧
蓝色回想的鱼

请问如何把与红色内容重复的蓝色内容排除？
我采的是用户名


路过的高手请劳烦解答 谢谢！

飛越無限

沒看明白你的意思

嗜血狼魂

意思就是我要采集论坛发贴的用户名

比如现在这个贴子
http://bbs.locoy.com/viewthread. ... e%3D1&frombbs=1
1楼用户名：嗜血狼魂
2楼用户名：飛越無限
3楼用户名：嗜血狼魂
其中1和3重复了
请问如何设置才能排除重复（嗜血狼魂） 只要一个（嗜血狼魂）

rq204

这个采集时是没有办法的，你可以采完后在数据库里操作一下，编写个小程序处理一下，这是我的解决方案。