tao729 发表于 2009-3-10 23:44:41

CSV无法自动换行

zcx1214013 发表于 2009-3-11 00:36:57

感谢管理员rq204,我的问题已解决,谢谢!!!!

mayo888 发表于 2009-3-11 00:57:15

本帖最后由 mayo888 于 2009-3-11 04:04 编辑

采大量网址时,假死,如中途停止任务时,火车会自动关闭。

idtown888 发表于 2009-3-11 02:42:18

本帖最后由 idtown888 于 2009-3-11 06:03 编辑

  今晚闲来没事,把火车功能全部看了一遍。特意来提交BUG,以及建议火车改进的地方,希望火车越来越强大。
  有些问题不专业,呵呵,多指教了。ali68ls

  1)在添加网址时,我加了3000多个,我不知道有些重复的,结果,一直弹出窗口提示重复网址,无奈我只能结束火车头的进程。还有不知能否加个导出一级网址无重复的功能:)

  2)采集下载地址,应该多加一个功能:链接不得包含,如:论坛表情这些就不必下载了。而有的图片链接不固定,或引用其它各种网站的。

  3)发布内容时,设置标题为空就不发布了,但是如果发布几百个以后,再重新开始任务,一直提示,标题为空,再发几百个,又从头提示。。。效率有待提高。

  4)列表页网址设置标签的问题,列表页有大类名,内容页只有小类名,所以列表页需要采集大类名作为标签,而大类名不与列表记录成对出现,如:大类名只出现在<title>里。

  5)还是自定义列表页网址设置的标签问题,如果在内容里设置了循环增加新记录,结果该标签只能匹配到一条记录?

  6)探测真实地址功能,不一定是要探测下载的,有时候也需要采集跳转后的真实网址。同样在采集一、二级网址时跳转也可优化。
  而我在全局配置里,把 HTTP请求设置->自动跳转 勾选去掉后,又不能采集跳转页任何内容。
  采集记录能否包含:二级列表页网址、一级列表页网址、内容页网址(均可选是否真实)

  7)有朋友提到的,批量网址的问题,如:90008000.htm、90009000.htm、后接:90010000.htm、或接:900010000.htm。变数的位数,可能1-N位。90009999000.htm。采集网址也可设置变量,如:[任务参数1]

  8)多页面采集,加一个测试网址的自动保存功能,可人性化一点。如能跨站就更好。:)

  9)采集规则如果有设置多页面采集,则导出规则到其它机子就用不了。还有在列表树加个采集测试功能,测试网址数自定,这样就不必更改规则了。

  10)发布模块中,多个登录随机值出现在发表页,而发表页一刷新,随机值就变。

  11)分类名称及ID格式,在多级类中,格式会不一样,加一个替换功能。替换功能支持正则,呵呵。

  12)在入库时,不知道如何处理“'”单引号的。我看到有时入库的单引号变成:“&#39”;而有的是:“\'”,这样就不统一了,如果与其它表字段关联就会出错。

  13)发布时成功未知,关闭后重开火车又能发布成功。

  14)这个有点难,多个域名或二级域名之间的发布模块问题。

  15)最后当然是验证码了。登录时填两个或两次验证问题。

  更多BUG:http://bbs.locoy.com/spider-36330-1-1.html

ali68ls ali68ls

leaves 发表于 2009-3-11 08:11:12

这么多bugali76ls

影响我使用的bug只有一个,就是 [时间转化] 函数不能用。
比如“时间”标签采集到的时间格式为“2009-03-06 14:45:32”,插入数据库的时候使用[时间转化:时间]
2008版的时候是没问题的,2009版就转化不了,全部都是1970-01-01

leegang 发表于 2009-3-11 10:46:58

这么多bugali76ls

影响我使用的bug只有一个,就是 [时间转化] 函数不能用。
比如“时间”标签采集到的时间格式为“2009-03-06 14:45:32”,插入数据库的时候使用[时间转化:时间]
2008版的时候是没问题的,2009版 ...
leaves 发表于 2009-3-11 08:11 http://bbs.locoy.com/images/common/back.gif这个我也遇到了。。我还以为是我操作问题呢

rq204 发表于 2009-3-11 11:03:25

26# leegang

你那重复太多了,所以按全局里的设置,是不会采下边的.你要在全局设置里修改相关参数.

wendywang 发表于 2009-3-11 11:50:47

发布模块编辑时,选中使用接口文件,编辑框重叠造成无法编辑。

luring 发表于 2009-3-11 16:12:30

程序有时候总会弹出些莫名奇妙的错误框 还好影响不大
zydxdx 发表于 2009-3-10 13:55 http://bbs.locoy.com/images/common/back.gif经常出现。。

fillins 发表于 2009-3-11 16:14:25

使用php接口,采集几条会异常退出(绝对不是php问题)
页: 1 2 3 [4] 5 6 7
查看完整版本: 2009版bug统一确认中。