找回密码

火车采集器软件交流官方论坛

搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 2169|回复: 0

采集结果不得重复 只能判断前面几十个字?

[复制链接]
发表于 2014-7-14 17:31:17 | 显示全部楼层 |阅读模式
这个不得重复只能判断前面几十个字?
我采集了播放地址,想判断重复,但是好像播放地址太多就判断不了了
比如我采集了内容为:
  1. 【优酷】播放1集2集3集4集5集6集7集8集9集10集11
复制代码
再采集
  1. 【优酷】播放1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集
复制代码
,判断为不重复,这个没问题。

但是如果才采集了内容为:
  1. 【优酷】播放1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【风行】播放1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【qq】播放 1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【搜狐】播放 1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【华数TV】播放 1集2集3集4集5集6集7集8集9集10集11集12集
复制代码
在采集
  1. 【优酷】播放1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【风行】播放1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【qq】播放 1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【搜狐】播放 1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【华数TV】播放 1集2集3集4集5集6集7集8集9集10集11集12集【土豆】播放 1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【芒果TV】播放 1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集【暴风】播放 1集2集3集4集5集6集7集8集9集10集11集12集13集14集15集16集17集18集19集20集21集22集23集24集25集26集27集
复制代码
这时候就判断为重复了。本来显然是不一样的。
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

温馨提示:建议您联系官方定制服务,通过官方支付方式完成支付。您与其他非官方账号发生的交易,我方概不承担责任。网络有风险,交易需谨慎

QQ| 手机版|Archiver| 火车采集器官方站

Copyright © 2001-2013 Comsenz Inc.  Template by Comeings! All Rights Reserved.

Powered by Discuz! X3.4( 皖ICP备06000549 )

快速回复 返回顶部 返回列表