wenchunhai 发表于 2012-9-20 22:38:09

采集各类电子报纸报纸在线在线浏览性质的报纸方法(二)

前面我的一个帖子http://bbs.locoy.com/forum.php?mod=viewthread&tid=130767&page=1#pid565874 讲述了如何利用火车头采集器采集很多电子报纸报纸在线性质的新闻的，更快更准时地实现对网站内容的更新和补充。由于上一个帖子是自己摸索中，所以有很多完善的地方，现在来讲网站如何深入采集：
1、多级网址获取。
由于上一个帖子只讲解道了获取每个版面的网址，而没有详尽的获取每个版面下具体的每篇文章的地址，因此在多级网址获取里面我们增加一个获取方式；
如下图：

在第一个网址索取里面，我添加了一个过滤，因为链接地址nodo_220以上的地址都是娱乐版的内容，网站不需要，所以过滤掉。

wenchunhai 发表于 2012-9-20 22:38:56

中国砖厂网 www.cn-bricks.com
页: [1]
查看完整版本: 采集各类电子报纸报纸在线在线浏览性质的报纸方法(二)