如何采集列表页里的网址？

knifeqiao · 发表于 2016-12-26 16:35:36

首先谢谢指教

列表页：http://域名/news/
新闻1列表：http://域名/news/1/
新闻2列表：http://域名/news/2/
所有的新闻都是：http://域名/news/(*).html

例如想单独采集新闻2下面的网址，该如何操作。火车头能像采集侠那样抓取列表页里面的网址么？

leweizxl · 发表于 2016-12-26 16:53:34

有范围吧设置下采集范围

knifeqiao · 发表于 2016-12-27 08:17:17

leweizxl 发表于 2016-12-26 16:53
有范围吧设置下采集范围

http://域名/news/(*).html 所有列表共用的排序，没法明确范围。想要实现抓取指定页面内的所有链接这样的效果，不知道有办法实现么？

leweizxl · 发表于 2016-12-27 09:18:35

网址里有网址过滤有统一字符的话可以设置