关于采集微信社区

yanxiaomao1 · 发表于 2014-10-30 10:04:43

比如我想采集这个微信社区http://m.wsq.qq.com/156411145
但是电脑浏览器打开只能看到一部分帖子，我想实时采集他的数据

http://wsq.qq.com/reflow/156411145-1?_wv=1&source=

我分析了他的帖子链接~~~
http://wsq.qq.com/reflow/156411145-X?_wv=1&source=
是根据X的改变而改变~~~所以火车头有没有办法实现每次网址递增来获取他的最新帖子？

303718 · 发表于 2014-10-30 10:35:49

那就直接把这个当成内容页来采
http://wsq.qq.com/reflow/156411145-1?_wv=1&source=
http://wsq.qq.com/reflow/156411145-2?_wv=1&source=
.............
http://wsq.qq.com/reflow/156411145-100?_wv=1&source=

yanxiaomao1 · 发表于 2014-11-6 15:52:01

303718 发表于 2014-10-30 10:35
那就直接把这个当成内容页来采
http://wsq.qq.com/reflow/156411145-1?_wv=1&source=
http://wsq.qq.com/ ...

那就要手动了~~我要全自动~~~

帐号		自动登录	找回密码
密码			加入会员