需要采集的数据有一部分在列表页采集 如何采集

tangshangkui

问一个问题 我要采集的东西有一部分在列表页面怎么办
这是列表页  http://www.7k7k.com/tag/149/
游戏的小图片只有列表页有
游戏内容页没有

说明一下 不能使用缩图图 因为他们不一样
图片地址没有规律,,规律我找了好久也没有找到(不同的栏目规律不同 有的栏目有规律 有的没有)

我开始的想法是把列表页当着内容页采集
循环采集小图片 然后使用多页面采集功能采集内容页面的东西 但是发现内容页面采集回来的都是一样的东西(第一个游戏的内容)

类似的问题在我在采集一个软件下载网站的时候也遇到过

还有

比如http://www.xiaoshuo520.com/Html/Book/16/68092/
这是一个小说的目录页面
如果使用循环采集的话可以采集到每一集小说的内容页面地址
问可不可以使用多页面采集一次采集到小说的内容?

zjyk1984

自定义获取链接方式

专业收费采集

第一步的时候选择 自定义链接方式  在这里面设置你想想要的参数