ninqq 发表于 2012-10-18 13:33:57

强烈建议添加下载判断个功能【官方人员进来】

本帖最后由 ninqq 于 2012-10-18 13:35 编辑

就是使用了任意下载功能或者图片下载功能
当没有探测到文件或者下载失败
能够标记为 未采集 或者直接删除

就想标签里面的有个启用不得为空一样 来进行筛选
现在是不敢有木有采集到 都直接写进去了

现在木有这个判断功能对有些网站有很多失效的链接
或者因为采集的速度太快 网速卡了 没有探测到下载地址

对于采集下来的质量是非常的恐怖的
希望官方能够增加这个功能

caijihome 发表于 2012-10-20 11:28:04

这个可以看出来吧,可以手工删除。也可以手工标记为为采集。

caijihome 发表于 2012-10-22 01:25:02

本帖最后由 caijihome 于 2012-10-23 22:00 编辑

顶!2010版本,图片下载功能,当图片下载错误,采集数据库里面也会修改为相对地址。设置的,
但是V7版本里面还是别人的域名,绝对地址,是不是不妥呢?
V7版本当图片下载错误的时候, 采集里面都是别人的图片域名,不妥,不妥,不妥

ninqq 发表于 2012-10-26 17:20:55

caijihome 发表于 2012-10-20 11:28 static/image/common/back.gif
这个可以看出来吧,可以手工删除。也可以手工标记为为采集。

几w的数据量 难道还手动吗
明显不行

lbjyuer 发表于 2016-2-10 18:03:31

爪,以后学习下。。
页: [1]
查看完整版本: 强烈建议添加下载判断个功能【官方人员进来】