强烈建议添加下载判断个功能【官方人员进来】

ninqq · 发表于 2012-10-18 13:33:57

本帖最后由 ninqq 于 2012-10-18 13:35 编辑

就是使用了任意下载功能或者图片下载功能
当没有探测到文件或者下载失败
能够标记为未采集或者直接删除

就想标签里面的有个启用不得为空一样来进行筛选
现在是不敢有木有采集到都直接写进去了

现在木有这个判断功能对有些网站有很多失效的链接
或者因为采集的速度太快网速卡了没有探测到下载地址

对于采集下来的质量是非常的恐怖的
希望官方能够增加这个功能

caijihome · 发表于 2012-10-20 11:28:04

这个可以看出来吧，可以手工删除。也可以手工标记为为采集。

caijihome · 发表于 2012-10-22 01:25:02

本帖最后由 caijihome 于 2012-10-23 22:00 编辑

顶!2010版本，图片下载功能，当图片下载错误，采集数据库里面也会修改为相对地址。设置的，
但是V7版本里面还是别人的域名，绝对地址，是不是不妥呢？
V7版本当图片下载错误的时候，采集里面都是别人的图片域名，不妥，不妥，不妥

ninqq · 发表于 2012-10-26 17:20:55

caijihome 发表于 2012-10-20 11:28
这个可以看出来吧，可以手工删除。也可以手工标记为为采集。

几w的数据量难道还手动吗
明显不行

lbjyuer · 发表于 2016-2-10 18:03:31

爪，以后学习下。。

强烈建议添加下载判断个功能【官方人员进来】

浏览过的版块