采集没有分页的网站

bbsboat · 发表于 2013-1-11 10:21:44

比如说pintreste这类的网站，没有分页
都是鼠标向下拉以后自动就出来了，这样的网站如何采集呢
非常谢谢指教！

lmj243 · 发表于 2013-1-11 12:37:43

嘿，这种我玩过！以前弄thefancy.com的，后来发现他们其实是有规律的，PINTEREST的，我一会研究研究

wxl08 · 发表于 2013-1-11 13:47:03

这种具体要用抓包工具抓取下，应该是post方式提交的，要找到post数据表单在采集器里设置post方式采集

bbsboat · 发表于 2013-1-11 15:32:25

lmj243 发表于 2013-1-11 12:37
嘿，这种我玩过！以前弄thefancy.com的，后来发现他们其实是有规律的，PINTEREST的，我一会研究研究

兄弟好呀，能再提供下更多的信息不？我看了thfacy 与PIN是一种类型的

bbsboat · 发表于 2013-1-11 15:33:16

wxl08 发表于 2013-1-11 13:47
这种具体要用抓包工具抓取下，应该是post方式提交的，要找到post数据表单在采集器里设置post方式采集

您好，关于POST的采集有教程吗？

lmj243 · 发表于 2013-1-11 15:40:52

http://pinterest.com/?lazy=1&page=4
http://pinterest.com/?lazy=1&page=5
http://pinterest.com/?lazy=1&page=6
http://pinterest.com/?lazy=1&page=7
....
这样弄出来，会了吧

lmj243 · 发表于 2013-1-11 15:43:18

bbsboat 发表于 2013-1-11 15:33
您好，关于POST的采集有教程吗？

Pinterest的分页要比thefancy简单得太多了

帐号		自动登录	找回密码
密码			加入会员