yanxiaomao1 发表于 2014-10-30 10:04:43

关于采集微信社区

比如我想采集 这个微信社区http://m.wsq.qq.com/156411145
但是电脑浏览器打开只能看到一部分帖子,我想实时采集他的数据


http://wsq.qq.com/reflow/156411145-1?_wv=1&source=

我分析了他的帖子链接~~~
http://wsq.qq.com/reflow/156411145-X?_wv=1&source=
是根据X的改变而改变~~~所以火车头有没有办法实现每次网址递增来获取他的最新帖子?

303718 发表于 2014-10-30 10:35:49

那就直接把这个当成内容页来采
http://wsq.qq.com/reflow/156411145-1?_wv=1&source=
http://wsq.qq.com/reflow/156411145-2?_wv=1&source=
.............
http://wsq.qq.com/reflow/156411145-100?_wv=1&source=

yanxiaomao1 发表于 2014-11-6 15:52:01

303718 发表于 2014-10-30 10:35 static/image/common/back.gif
那就直接把这个当成内容页来采
http://wsq.qq.com/reflow/156411145-1?_wv=1&source=
http://wsq.qq.com/ ...

那就要手动了~~我要全自动~~~
页: [1]
查看完整版本: 关于采集微信社区