发新话题
打印

LocoySpider网页内容采集器1.0.1预览版发布

LocoySpider网页内容采集器1.0.1预览版发布

  写这个采集器的初衷本是为自己站添加内容之用,后来经群里面几个好友一再要求,做成了个通用型了,功能虽不说很强大,现在应该还是能凑合着用吧,不怕笑话,今天将它发布。如果效果还好,我将继续开发下去。

安装环境:

本采集器采用Visual C#编写,可以在Windows2003下运行,若在Windows2000,Xp下运行请先到微软官方下载一个.net framework1.1或更高环境组件:
附:.net framework 1.1下载地址:http://www.microsoft.com/downloa ... p;displaylang=zh-cn
.net framework 2.0下载地址:http://www.microsoft.com/downloa ... p;displaylang=zh-cn

功能简介:
1、多系统支持,现已加入对PHPWIND,DISCUZ,DEDECMS2.X和PHPArticle2.01的采集支持,若您的系统现在软件里没加入,请与我们联系,将在下期版本中加入网友要求最多的几套系统。
2、模拟用户登录,和操作浏览器一样,但程序只处理核心数据,运行速度更快。
3、可以设定是否将远程图片及Flash下载到本地(Flash文件一般较大,建议不下载,程序会将其自动获取到其绝对地址)。
4、多线程,时间间隔设定 可以根据您的机器性能和网速或系统允许的文章发表时间设定
5、较强大的网址采集功能,配合页面内定义区域采集、手动生成网址及采集二级页面功能基本上可采集到您所要的任何网址集合。
6、内容规则定义有多条内容过滤规则,彻底过滤掉内容里的广告等无用内容。
7、网址集合、内容规则导入、导出功能,方便网友共享采集到的内容。
8、论坛支持Html和UBB发帖两种模式。
9、、大家想好再告诉我吧。



内容入库功能尚未加入,以后再完善吧。。。


Enjoy it!
有许多思想是从DEDE自带的采集器和CSDN小助手软件那学来的,在这里表示感谢

TOP



TOP



TOP

支持LocoySpider网页内容采集器。

TOP

这个采集器好像以前见过...

TOP

引用:
下面是引用huboy于2005-11-21 14:59发表的:
这个采集器好像以前见过...
前一个星期发布过一个测试版。。

TOP

发新话题
Powered by Discuz! 6.0.0  © 2001-2007 Comsenz Technology Ltd
Processed in 0.173236 second(s), 7 queries, Gzip enabled
当前时区 GMT+8, 现在时间是 2008-10-7 20:06 皖ICP备06000549 清除 Cookies - 联系我们 - 火车采集器官方站 - 静态归档