目前的自动识别分页还无法识别瑞丽女性网-服饰频道的内容分页，因为分页是JS调用的而且无法识别无标签的连接，也就是纯文本连接...

在采集的时候，出现采集一些大的页面，下载超过10秒，并且采集条数比较大，超过200条的时候，火车就占cpu100%，然后死机，无法继续采集的问题。建议修正网页下载超时，网页...

要是能选择像1.2一样直接发布就好了

如题，这样好让火车头知道哪些是分页，哪些不是

按照是否匿名和是否遵循robots.txt协议有4种蜘蛛： 1 真名真姓，遵循robots.txt 协议。代表：GoogleBot BaiduSpider MSNBot Yahoo!Slurp 等 2 真名真姓，不遵循robots.txt...

一：采集数据的功能增加： 1.正对数字数据，可以增加运算的功能，其中包含（加减乘除） 例如： 原来数据是：100 采集过后，处理的数据可以在这个数字上+10，或者乘以10%。 ...

2008怎么不能像3.2那样自定义来源站的编码了？这个是个很好很实用的功能啊 怎么就取消了呢？

方便喜欢用Linux的站长采集数据，Linux下不需要装杀毒软件，也提高了采集的速度 而且再也不用怕微软的反盗版大棒了 ...

现在写采集的时候 添加过滤的时候,需要一条一条的填进去 有没有办法搞成一行一个过滤,这样可以批量添加进去呢? 一行一个过滤,多少行多少个过滤, 因为我常采一些麻烦的...

Weather Screen Scraping with C# http://www.csharphelp.com/archives2/archive435.html HTML Screen Scraping using C# .Net WebClient http://www.codersource.net/...

近来在采集做一个站，由于使用了大量的标签，启用“全局替换”是无效的。 然而，在单独标签里面做替换是有效果的。于是思考了一下，对于专业的采集器火车头，能否做些功能...

Google似乎是已经宣布要推出OpenSocial，英文Blog里报道很多，但因为正式的东西还没有出现，所以看了一圈，说得也不是很详细，大体是几点： [*]开发者将会得到3个Javascrip...

有时候要下载附件，但发布却是要上传形式，有些附件是不能提前知道名字的，这样的话要上传附件就得不到那个文件名，也就是说发布不了，如果能增加一个按标题命名，那么就可...

http://bbs.locoy.com/spider-32268-1-1.html 这个帖子中，楼主如果使用urlencode 功能，则会造成不能正确生成网址 如果楼主不使用 urlencode, 则可能在 软件介绍中 出现...

分析浏览器去下载网页的过程 [ 本帖最后由 faunus 于 2008-11-19 16:38 编辑 ]

https://developer.mozilla.org/en/XUL_Explorer ***** XUL Explorer是一个轻量级的XUL集成开发环境，建成一个XULRunner应用，提供一个简单的方式进行试验XUL 。这...

我想大家转拼音一般功能都是用在文件名上面吧: 所以建议: 建议一: 希望在转成拼音的后面加一个选择项: 最多转多少个全角字符. 如 10 个全角字符,即 20个英文或者数字. 例...

简洁一点来讲 比如我每天都会跟踪网易新闻 每天采集到的帖数不一样，比如 今天采集到200篇 可是我只想发布50篇，而这50篇只能从今天采集到的200篇中产生 目前火车头还...

希望火车头能加入自动导入代理服务器功能,现在很多代理IP都是从网上买来的,一般都有自动提取代理IP的功能,比如某淘宝店自动提取地址如下:http://222.186.50.73:8888/api.as...