wfyeshi 发表于 2008-3-20 22:27:57

【求助】采集网址深度2时,如何采集1级列表分页的内容

采集网址深度2时,如何采集1级列表分页的内容,我只能采集到1级列表第一页的内容,2 3 4 ~~~页面内容采集不到,什么问题????????????希望指点一下,谢谢

这样说是不是明白点呢???????????
比如说设采集深度为2,采集页面为:http://bbs.locoy.com/index.php,
开始测试采集网址
采集到下面每个频道地址,采集到频道内部文章列表页的地址

例如:http://bbs.locoy.com/netget-45-1.html资源模块区,此时采集到http://bbs.locoy.com/netget-45-1.html中的所有帖子地址,
但是采集不到其他面的帖子地址
如:
http://bbs.locoy.com/netget-45-2.htm
http://bbs.locoy.com/netget-45-3.html
…………………………
http://bbs.locoy.com/netget-45-44.html


[ 本帖最后由 wfyeshi 于 2008-3-21 14:03 编辑 ]

沦陷今生 发表于 2008-3-20 23:28:42

没明白,你可以使用导出再导入反复操作.

wfyeshi 发表于 2008-3-21 13:52:58

比如说设采集深度为2,采集页面为:http://bbs.locoy.com/index.php,
开始测试采集网址
采集到下面每个频道地址,采集到频道内部文章列表页的地址

例如:http://bbs.locoy.com/netget-45-1.html资源模块区,此时采集到http://bbs.locoy.com/netget-45-1.html中的所有帖子地址,
但是采集不到其他面的帖子地址
如:
http://bbs.locoy.com/netget-45-2.htm
http://bbs.locoy.com/netget-45-3.html
…………………………
http://bbs.locoy.com/netget-45-44.html

沦陷今生 发表于 2008-3-21 16:27:12

导出地址再导入地址反复操作

cooloop 发表于 2008-4-30 23:41:25

我也遇到了同样的问题,楼上说的不是很明白。分页地址都采集不到不知道怎么导出地址在导入地址?

sushy 发表于 2008-5-1 03:07:25

总之一句话,列表页的文本是不能和正文页的文本用同一个任务采集。

只有分开,第一次采集列表页文本和正文地址。

第二次用这个正文地址采集正文内容。

至于怎么将第一次采集到的正文地址导出并应用于第二次使用,那就各显神通了。

当然,你也可以第一次只采集列表页文本(不采集列表)。
第二次才使用二级采集,采集正文页文本。

以上的结果是采集到两个数据库中,想办法整合。

19book 发表于 2008-5-5 09:10:47

还是深奥,看不懂哦
页: [1]
查看完整版本: 【求助】采集网址深度2时,如何采集1级列表分页的内容