查看完整版本: Tom论坛采集的问题![管理员请进,重要建议!!]

purezhang 2006-10-29 23:25

Tom论坛采集的问题![管理员请进,重要建议!!]

tom的帖子列表是:
[url]http://bbs.ent.tom.com/forum/search_thread.php?forumid=1&page=10&sort=1[/url]

帖子地址是:
[url]http://bbs.lady.tom.com/forum/view_thread.php?forumid=1&threadid=161510[/url]
(以这个为例)
他的帖子列表中没有页数显示 所以无法采集页数
他帖子的第二页地址:
[url]http://bbs.lady.tom.com/forum/view_thread.php?forumid=1&threadid=161510&page=2[/url]
推断第一页地址可以用:
[url]http://bbs.lady.tom.com/forum/view_thread.php?forumid=1&threadid=161510&page=1[/url]
(验证后正确)

之后 我用了2级采集 在帖子中的帖子[下一页]操作附近设置了分页的判断
最终 可以采集 1、2、最后一页
一共也就可以采集三页


综上,建议管理员是不是可以增加3级 甚至4级类表
如果有了4级 甚至可以 直接把一个论坛 甚至一个整站 一次性采集!

请重视一下!
谢谢!!!

purezhang 2006-10-29 23:35

还有要说的就是 就像上面所说的
其实很多论坛都是 多页
多页发出来就是很多重复的

怎么能做出来标题[1]
标题[2]的形式

或者 合并到一页中

怎么做呢?

purezhang 2006-10-30 00:22

包括sina。sohu。163。tianya。QQ在内的几乎所有大站的论坛 都市 这个形式
没有列出第1、2、3、4、5...10页
都是
[上一页] [第1/12页] [下一页]
所以采到的也仅仅 是第1、2和最后一页
页: [1]
查看完整版本: Tom论坛采集的问题![管理员请进,重要建议!!]
售前客服QQ: 火车采集器客服 rq204, 火车采集器客服 飞越无限火车采集器客服 孤魂火车采集器客服 尘缘, 联系电话:0551-3495249(技术合作问题) 023-58436018 (08:00-20:00-客服),0752-2553545(09:00-20:00-客服)