liwan123 发表于 2013-12-29 21:59:41

Travis大神,快进来采集知乎网站啊,高难度挑战。。。。。

本帖最后由 liwan123 于 2013-12-29 22:03 编辑

按照你说的加了header还是不行,只能获取到第一页,无法获取搜索SEO的结果网页,奇怪了,赶紧指导下怎么搞啊。网址是http://www.zhihu.com/search?q=seo&type=question这网站点击更多从源代码里却看不到新页的内容,奇怪了。同时非常感谢网友“白梦宇”,解决了大部分问题,现在就剩下分页问题

pidansafe 发表于 2013-12-30 02:16:44






303718 发表于 2013-12-30 08:38:48

用POST模式采集列表

ahui598 发表于 2013-12-31 11:12:55

不错,学习了 感谢大神分享

liwan123 发表于 2013-12-31 21:32:03

:lol非常感谢,太好了,还是“pidansafe ”厉害,呵呵

lmj243 发表于 2014-1-7 09:22:32

叉, 竟然在论坛里有人对哥点名....

yoyo3 发表于 2014-8-25 19:28:27

pidansafe 发表于 2013-12-30 02:16 static/image/common/back.gif


有办法采集专栏吗?专栏不知道怎么采集.
页: [1]
查看完整版本: Travis大神,快进来采集知乎网站啊,高难度挑战。。。。。