【求助】采集网址深度2时,如何采集1级列表分页的内容
采集网址深度2时,如何采集1级列表分页的内容,我只能采集到1级列表第一页的内容,2 3 4 ~~~页面内容采集不到,什么问题????????????希望指点一下,谢谢这样说是不是明白点呢???????????
比如说设采集深度为2,采集页面为:http://bbs.locoy.com/index.php,
开始测试采集网址
采集到下面每个频道地址,采集到频道内部文章列表页的地址
【
例如:http://bbs.locoy.com/netget-45-1.html资源模块区,此时采集到http://bbs.locoy.com/netget-45-1.html中的所有帖子地址,
但是采集不到其他面的帖子地址
如:
http://bbs.locoy.com/netget-45-2.htm
http://bbs.locoy.com/netget-45-3.html
…………………………
http://bbs.locoy.com/netget-45-44.html
】
[ 本帖最后由 wfyeshi 于 2008-3-21 14:03 编辑 ] 没明白,你可以使用导出再导入反复操作. 比如说设采集深度为2,采集页面为:http://bbs.locoy.com/index.php,
开始测试采集网址
采集到下面每个频道地址,采集到频道内部文章列表页的地址
【
例如:http://bbs.locoy.com/netget-45-1.html资源模块区,此时采集到http://bbs.locoy.com/netget-45-1.html中的所有帖子地址,
但是采集不到其他面的帖子地址
如:
http://bbs.locoy.com/netget-45-2.htm
http://bbs.locoy.com/netget-45-3.html
…………………………
http://bbs.locoy.com/netget-45-44.html
】 导出地址再导入地址反复操作 我也遇到了同样的问题,楼上说的不是很明白。分页地址都采集不到不知道怎么导出地址在导入地址? 总之一句话,列表页的文本是不能和正文页的文本用同一个任务采集。
只有分开,第一次采集列表页文本和正文地址。
第二次用这个正文地址采集正文内容。
至于怎么将第一次采集到的正文地址导出并应用于第二次使用,那就各显神通了。
当然,你也可以第一次只采集列表页文本(不采集列表)。
第二次才使用二级采集,采集正文页文本。
以上的结果是采集到两个数据库中,想办法整合。 还是深奥,看不懂哦
页:
[1]