growidea.net 发表于 2011-7-9 21:29:23

解决采集时因关键字问题而发布失败的问题!

本帖最后由 growidea.net 于 2011-7-10 07:57 编辑

采集的时候经常出现采到一半就会出现一条出错,当这条文章出错后,接下来的文章全都出错!到服务器看了一下,发现CPU使用达到96%~100%!

经过我多次的试验,发现这是因为发布的时候选择了“自动获取关键字”,只要把这一项取消了问题就解决!

具体操作如下:

打开火车采集的“Web发布模块编缉器”选择“文章发表参数”把下面代码删除

/**********删除下面代码*********************

-----------------------------7dlocoyspider
Content-Disposition: form-data; name="autokey"

1

/****************************************


如果想添加关键字可以采集时添加自定义关键字:

/***********这个是在"autokey"的上面***********

-----------------------------7dlocoyspider
Content-Disposition: form-data; name="keywords"

[标签:关键字]

/****************************************


采集测试
来源网址:http://www.chinaz.com/News/Portals/06131X0292011.html
发布网址:http://www.growidea.net/a/xingyezixun/menhudongtai/2011/0709/1019.html

303718 发表于 2011-7-15 10:09:32

这种情况你把发布线程调成1把速度调慢应该不会这样

growidea.net 发表于 2011-7-15 12:35:38

回复 2# 303718


    我试过把文章内容在后台直接发布,结果还是卡住了,问题是在于后台自动获取关键字所使用的CPU资源太多了(我用的是免费空间,CPU资源是用限的)!

303718 发表于 2011-7-15 13:35:34

那就没有办法了。只能按你说的那样不自动获取了。
页: [1]
查看完整版本: 解决采集时因关键字问题而发布失败的问题!