采集登陆的网站,有问题??

jhandsome · 发表于 2009-3-31 09:00:48

采集网页时,其中有些内容需要登陆后才能查看,可是,我已经获取登陆的cookie了，但是,测试的时候,查看源文件,就是没登陆成功，需要登陆才能看的内容依然看不到,请问,各位,有没有遇到类似的问题,请指教!!!

jhandsome · 发表于 2009-3-31 09:32:09

同志们给指点指点啊!

专业收费采集 · 发表于 2009-3-31 10:12:34

第一步登陆需要采集的网站获取到相应的COOKIE值或者用专业的抓包软件获取到COOKIE值在采集就可以了

jhandsome · 发表于 2009-3-31 10:27:36

首先,谢谢3楼的指点!
可是我已经登陆获取了cookie 了啊,就是在第一步采集网址的时候,登陆获取的,
到了第二步,采集内容,采集页面测试(典型页面)的时候,就没获取到要登陆后才能看的内容,并且在采集器里看了下源码,也是没有,这是怎么回事啊 ....在第一步的时候，已经先登陆了 ..

jhandsome · 发表于 2009-3-31 10:48:47

比如这个页面,http://d.ch.gongchang.com/buy/132084.html

右侧的联系方式是需要登陆才能看的;

但问题就在于,在采集器里登陆后,它还是没显示,意思还是没获取到cookie,郁闷 ...

浏览器上,登陆后就能查看 ...

zydxdx · 发表于 2009-3-31 12:56:23

重新抓取cookie这种情况不是在火车内登陆一次就能获得cookie的要用专业的抓包工具
关于登陆采集问题可以在论坛上搜索一下有些相关说明

jhandsome · 发表于 2009-3-31 14:03:08

谢谢 zydxdx !
我再去搜下吧,之前没搜着什么有用的信息 ...

jhandsome · 发表于 2009-3-31 16:25:38

刚才搜索了一下,关于在火车头内登陆不成功的问题,帖子不少,好几年前就有了,也没看到什么解决的办法,难道真不能够解决吗???

帐号		自动登录	找回密码
密码			加入会员