3个连续深入的页面，多页采集的问题

wootin · 发表于 2011-9-6 16:52:45

现有  A页面，要采集A页面上的数据
然后通过  A页面  获取 B页面的URL,并且采集B页面的数据
  再通过  B页面  获取 C页面的URL,并且采集C页面的数据

简单来说，A、B、C3个页面上面的数据都是要采集的，并且B、C两个页面的URL只能分别通过上级页面的源代码里获取

请求各位帮助！万分感谢

303718 · 发表于 2011-9-6 19:11:44

用多页采集也搞不定吗?

303718 · 发表于 2011-9-6 19:14:34

用多页采集也搞不定吗?

zhouchanglin · 发表于 2011-9-6 20:46:13

如你说的，A页面--------列表页，可以通过自定义标签，获取列表页里的需要的标签
B页面-------------内容页，通过列表页获取

c页面-------------------通过B页面获取，就是一个多页

这样就可以采集了

发下网址吧？

wootin · 发表于 2011-9-7 19:46:01

回复 4# zhouchanglin

感谢回复，
大体是这样的
【A页面】是个人资料页，包含了相册的url（B页面）
【B页面】是相册列表，包含了照片列表的url（C页面），有些用户不一定有相册。可能为空
【C页面】是照片列表

按照你说的方法，用深度1？那只能采集到内容页B和多页C啊，A采集不到
A页面的自定义标签是匹配默认页还是A页面，如果是A页面，那也得用多页的方法来获取吗？

谢谢

zhouchanglin · 发表于 2011-9-7 21:26:11

回复 5# wootin

提供采集的地址吧，这么说不清楚

wootin · 发表于 2011-9-7 21:35:17

回复 6# zhouchanglin

A:  http://u.discuz.net/home/space-1269734.html
B:  http://u.discuz.net/home/space-1269734-do-album-id-10268.html
C:  http://u.discuz.net/home/space-1269734-do-album-picid-168350.html

比如
我要一起采集 A 页面的【性别】
         B 页面的照片缩略图
         c 页面每个照片的照片上传时间

帐号		自动登录	找回密码
密码			加入会员