mo12yu 发表于 2014-3-30 15:49:44

求助,无规律分页网址怎样采集?

不像一般的网址有12345这种规律可循,如下

http://www.tripadvisor.com/ShowUserReviews-g308272-d311602-r198748443-Oriental_Pearl_Tower_Dongfang_Mingzhu-Shanghai.html#REVIEWS

http://www.tripadvisor.com/ShowUserReviews-g308272-d311602-r198142803-Oriental_Pearl_Tower_Dongfang_Mingzhu-Shanghai.html#REVIEWS

http://www.tripadvisor.com/ShowUserReviews-g308272-d311602-r197592918-Oriental_Pearl_Tower_Dongfang_Mingzhu-Shanghai.html#REVIEWS
这是它123页的网址,一共有377页呢每页才5条评论。。。

求大大指点!

303718 发表于 2014-3-30 16:39:01

可以试试上下页分页模式采集

49422504 发表于 2014-3-31 11:12:18

刚刚试了试,上下页可以采,采了一页,370多页评论,差点卡死。:(
页: [1]
查看完整版本: 求助,无规律分页网址怎样采集?