强烈建议同任务内的相同图片问题

cnfoyuan · 发表于 2013-7-24 19:38:02

很简单的一个问题：如果我们采集论坛，会发现回帖里面有很多是用表情图片的

火车头当前，会把每个帖子里面的表情图片都当成不同的图片下载一个。

能不能设定，对当前任务内，重复的图片，用同一张图片来替代啊？

不然多了很多无用的垃圾图片。

强烈要求老大改进啊。

就是多一个图片的表，有图片的时候，进行比较一下，如果相同，沿用之前下载的图片就可以了。

303718 · 发表于 2013-7-24 23:07:36

你选文件名为原文件名保存就好了.

caijihome · 发表于 2013-8-29 22:46:23

同求，顶顶
http://bbs.locoy.com/forum.php?m ... hlight=%CD%BC%C6%AC

pbdq · 发表于 2013-9-2 11:11:24

这个问题非常严重啊。希望能够重视啊

pbdq · 发表于 2013-9-2 11:12:00

我建议老大做一个图片的 md5校验，可以设定，同一组内，相同的md5的图片，都用同一张啊。

lbjyuer · 发表于 2016-2-10 12:44:11

爪，以后学习下。。

帐号		自动登录	找回密码
密码			加入会员