sudoo 发表于 2008-6-9 00:11:29

关于采集列表分页问题

看图。。。。

sudoo 发表于 2008-6-9 00:13:27

测试采集网址工采集得到一级网址8个 二级网址552个，

但采集内容回来只有43个网址

望高手指点，难道不能同时采集多个页面吗？

sengl 发表于 2008-6-9 09:30:55

目标站网址 .没法测试

sudoo 发表于 2008-6-9 10:43:11

原帖由 sengl 于 2008-6-9 09:30 发表 http://bbs.locoy.com/images/common/back.gif
目标站网址 .没法测试


可以详细说明一下吗？

fireye 发表于 2008-6-9 10:59:50

可能你写采集网址规则里没有设置好，比如排除一些不正确的网址，

sudoo 发表于 2008-6-9 11:24:26

呵呵，楼上的指点一下

http://newgame.duowan.com/tag/60976844417.html

关于最新加入游戏这个栏目的地址 这个跟定是要屏蔽掉的
我这样设置采集地址是：
http://newgame.duowan.com/tag/61910674294_<0,9,1,False,False>.html
文章列表页面的地址必须包含有：
http://newgame.duowan.com/tag/61910674294_(*).html
文章内容页面的地址必须包含有：
http://newgame.duowan.com/08(*)

sengl 发表于 2008-6-9 12:00:16

原帖由 sudoo 于 2008-6-9 11:24 发表 http://bbs.locoy.com/images/common/back.gif
呵呵，楼上的指点一下

http://newgame.duowan.com/tag/60976844417.html

关于最新加入游戏这个栏目的地址 这个跟定是要屏蔽掉的
我这样设置采集地址是：
http://newgame.duowan.com/tag/61910674294_.html
...

你要采集网址那里就错了点
应该是

sudoo 发表于 2008-6-9 13:17:09

ok 谢谢 我测试一下

sudoo 发表于 2008-6-9 13:29:01

另外想问下 见附件，，这块的怎么屏蔽掉了

还有发现下载回来的有些文章有标题，没有内容的，，，那有怎么处理

kugou2008 发表于 2008-6-9 15:13:54

楼上说的不错啊
页: [1] 2
查看完整版本: 关于采集列表分页问题