ki888 发表于 2017-5-14 12:52:22

求助，这种页面怎么分页处理

我想批量采集yahoo视频的标题，网址如下http://video.search.yahoo.com/search/video;_ylt=A2KIo9Z24BdZfjQAo577w8QF;_ylu=X3oDMTBncGdyMzQ0BHNlYwNzZWFyY2gEdnRpZAM-;_ylc=X1MDOTY3ODEzMDcEX3IDMgRhY3RuA2NsawRiY2sDMzhwMG1kOWNkZW8ybCUyNmIlM0QzJTI2cyUzRDlqBGNzcmNwdmlkA2s3MkVlVFl6TGpJMFpCWnFXTmRnVlFjTU1qSXpMZ0FBQUFDVXloYVIEZnIDc2ZwBGZyMgNzYS1ncARncHJpZAN0N2g5SmhvLlNxdUNMMkFjZjVLZXlBBG10ZXN0aWQDbnVsbARuX3JzbHQDNjAEbl9zdWdnAzEwBG9yaWdpbgN2aWRlby5zZWFyY2gueWFob28uY29tBHBvcwMwBHBxc3RyAwRwcXN0cmwDBHFzdHJsAzQEcXVlcnkDWAR0X3N0bXADMTQ5NDczNzI5MwR2dGVzdGlkA251bGw-?gprid=t7h9Jho.SquCL2Acf5KeyA&pvid=k72EeTYzLjI0ZBZqWNdgVQcMMjIzLgAAAACUyhaR&p=%E5%8A%A8%E7%89%A9%E4%B8%96%E7%95%8C&ei=UTF-8&fr2=p%3As%2Cv%3Av%2Cm%3Asa&fr=sfp

难点在于这个分页网址是不变的，每次点击下面的“show more videos”下面又会多出一页的内容但是网址还是没有变化，这种情况怎么处理才能继续采集后面的视频？

leweizxl 发表于 2017-5-15 17:22:43

http://video.search.yahoo.com/se ... 00000000c66bc8&n=60可以用fiddler抓包获取下

longouxiu 发表于 2017-5-15 19:29:47

方法就是 利用浏览器的 f12抓包功能，就可以 获取，不需 其他软件
页: [1]
查看完整版本: 求助，这种页面怎么分页处理