练习题 偶失败鸟。。。采不到网易博客搜索（已解决，谢谢孤魂，沦陷今生二位大虾）

xiongyujie37

思路 采集搜索之后的结果，把很少被人采集的到东东也采集到，避免大量重复内容被K

搜索之后的结果，主题相关性也比较高

我们拿 网易博客开刀

HOHO~~~


第一步，打开：http://blog.163.com/search




第二部：打开抓包工具，搜索 locoy






第三步，查看抓包POST信息

问题出来了。。。奇怪的是。。。。抓包POST 没有任何信息。。。。。





我很郁闷。。。。


因为 使用 GET 根本什么有用的网址都抓不到。。。。








今日 练习题，彻底失败。。。。真搞不清楚，是用post采集 还是用get 采集，究竟怎么采。。。（

[ 本帖最后由 xiongyujie37 于 2008-9-4 23:48 编辑 ]

孤魂

1. http://blog.yodao.com/search?keyfrom=163.js&doctype=js&ue=gbk&keyfrom=163.js&site=blog.163.com&t=a&start=100&length=10&q=mjj&sortbydate=0&referer=http%3A%2F%2Fblog.163.com%2Fsearch%3Ft%3Dblog%26o%3Dall%26q%3Dmjj%26s%3Dr%26p%3D7#

复制代码

何必那么复杂呢，就是ＧＥＴ就采集了

xiongyujie37

孤魂  你这个地址 什么都采不到。。。





[ 本帖最后由 xiongyujie37 于 2008-9-4 23:19 编辑 ]

沦陷今生

2楼的正解
3楼的用自定义链接

xiongyujie37

var response = { "grossDocNum" : 584, "availDocNum" : 584, "start" : 100, "query" : "mjj", "elapsedTime" : "0.553", "hits" : [ { "url" : "http://blog.163.com/2yn_1ov3/blog/static/84870656200852743352448", "title" : "你是蛾的姐妹，你是我的baby。", "author" : "2yn_1ov3", "publish_date" : 1214555632000, "format_publish_date" : "2008年6月27日", "length" : 210, "format_length" : "2百余", "position" : 100, "summary" : "蛾伤心难过、都是你安慰蛾。蛾一直一直都想告诉你，很爱很爱你，有时候很想你，但我不能告诉你。...但、蛾还是好希望，我们要一直在一起。<font color="#c60a00">mjj</font>,蛾永远的好姐妹。记着你的笑，记着你的好。怎么能够忘掉？你是蛾的姐妹，你是蛾的Ba6y，珍爱这感觉、", "blog_link_text" : "http://blog.163.com/2yn_1ov3", "blog_link" : "http://blog.163.com/2yn_1...", "blog_title" : "吢淡、" }, { "url" : "http://symr0801.blog.163.com/blog/static/26162738200722655616533", "title" : "周末了！", "author" : "symr0801", "publish_date" : 1174902976000, "format_publish_date" : "2007年3月26日", "length" : 241, "format_length" : "2百余", "position" : 101, "summary" : "这个周末一洗上周阴霾的天气，太阳终于出来了，温暖的阳光下让人觉得北京真的进入春天了！...外面大好的阳光真是觉得浪费了可惜，本想去<font color="#c60a00">mjj</font>家里打牌做好吃的，由于马瑞家的小朱要陪父母，五缺一，自然就延期了！在没有目标的情况下我和老公还是决", "blog_link_text" : "http://symr0801.blog.163.com/", "blog_link" : "http://symr0801.blog.163.c...", "blog_title" : "相伴到永远!" }, { "url" : "http://songjingyubin.blog.163.com/blog/static/663113092008731103243313", "title" : "暑假最后一个周末", "author" : "阿甘正传", "publish_date" : 1220149963000, "format_publish_date" : "2008年8月31日", "length" : 197, "format_length" : "1百余", "position" : 102, "summary" : "我要告别我的网络生活拉！趁着这个周末，我看了很多电影理发师陶德，this is depp.<wbr />这可是<font color="#c60a00">MJJ</font>的偶像。这是一个巨大的悲剧。陶德杀死了他的老婆。自己也被杀死了。我觉得很好看！还有就是high schoo<wbr />l music<wbr />al.这是同位推荐的我觉得女主角还是...", "blog_link_text" : "http://songjingyubin.blog.163.com/", "blog_link" : "http://songjingyubin.blog.1...", "blog_title" : "樱桃 家````ざ" }, { "url" : "http://jimmajin.blog.163.com/blog/static/38855023200752792310", "title" : "珍惜", "author" : "jimmajin", "publish_date" : 1182950581000, "format_publish_date" : "2007年6月27日", "length" : 400, "format_length" : "4百余", "position" : 103, "summary" : "今天我们都从圃田回来了。所有的乡都结束了。森清的工作完毕了。现在回想起来。。。一个多月的时间过的真快。以前总是盼望着早点结束。可是当今天我离开的时候是多...也没有人给我摘桃子吃了 也许人都是这样失去后才懂得珍惜 <font color="#c60a00">MJJ</font> 2007 6 27", "blog_link_text" : "http://jimmajin.blog.163.com/", "blog_link" : "http://jimmajin.blog.163.co...", "blog_title" : "cici" }, { "url" : "http://blog.163.com/sunshine0207@126/blog/static/245595222007175432147", "title" : "请等待", "author" : "sunshine...", "publish_date" : 1170841401000, "format_publish_date" : "2007年2月7日", "length" : 239, "format_length" : "2百余", "position" : 104, "summary" : "各位JJMM： 收到廖管命令，立马克服重重困难上网，唯恐愧对了大家的期待。本来想把我们的合照作为头像，可惜文件太大了，容我再想想办法。还有廖管让我写的“酸文”，还在酝...感谢<font color="#c60a00">MJJ</font>(马姐姐），照片很不错，我很久没这么上相了，开心啊！", "blog_link_text" : "http://blog.163.com/sunshine0207@126", "blog_link" : "http://blog.163.com/sunsh...", "blog_title" : "sunshine的博客" }, { "url" : "http://courage.hanxuan.blog.163.com/blog/static/781583612008428727933", "title" : "5.28", "author" : "゛ヤ. /錒...", "publish_date" : 1211974029000, "format_publish_date" : "2008年5月28日", "length" : 210, "format_length" : "2百余", "position" : 105, "summary" : "今天值周三天了早上站岗的时候天居然下雨害我们撑着雨伞站在那边我和<font color="#c60a00">mjj</font>同学还撑着吧粉红的（汗。。。jj还说这叫有个性） 下午花头精色透的学校还组织踢毽和跳绳子比赛很好很强大的我不知为什么作为男生踢毽子比女生还要厉害不知道算有面...", "blog_link_text" : "http://courage.hanxuan.blog.163.com/", "blog_link" : "http://courage.hanxuan.blo...", "blog_title" : "゛ヤ. /錒幹的博..." }, { "url" : "http://blog.163.com/han_xue1129/blog/static/27584299200763112231564", "title" : "初识大海", "author" : "han_xue1...", "publish_date" : 1183432951000, "format_publish_date" : "2007年7月3日", "length" : 223, "format_length" : "2百余", "position" : 106, "summary" : "周末<font color="#c60a00">MJJ</font>开车带我去了新戴河，从北京出发4个小时的路程，中午吃完饭我就一直催他快点去换游泳衣，我要去看大海。这是我第一次身临其境和大海有亲密的接触，心里相当地激动啊！嘿嘿，踩在沙滩上，细细的沙砾印着我的脚印，连心里都痒痒的。", "blog_link_text" : "http://blog.163.com/han_xue1129", "blog_link" : "http://blog.163.com/han_x...", "blog_title" : "雪雪的小屋" }, { "url" : "http://dimwall.blog.163.com/blog/static/99346032006990424238", "title" : "玩起了游戏", "author" : "dimwall", "publish_date" : 1160325762000, "format_publish_date" : "2006年10月9日", "length" : 94, "format_length" : "94", "position" : 107, "summary" : "最近无聊，玩起了一个游戏，自己一直很讨厌网游，没想到也玩上了好像叫个QQ幻想什么的。不过现在有点玩够了真的是无聊的人玩的有时候静不下心来去玩很烦的走来走去总感觉在做着重复的动作<font color="#c60a00">MJJ</font>。", "blog_link_text" : "http://dimwall.blog.163.com/", "blog_link" : "http://dimwall.blog.163.com...", "blog_title" : "梵高印象" }, { "url" : "http://taiwan9.blog.163.com/blog/static/40587997200771232828988", "title" : "taiwan9.com首页再次被改", "author" : "taiwan9", "publish_date" : 1186903708000, "format_publish_date" : "2007年8月12日", "length" : 1243, "format_length" : "1千余", "position" : 108, "summary" : "被黑了！落伍者<font color="#c60a00">MJJ</font>的又立功了，落伍者<font color="#c60a00">MJJ</font>的又立功了！不要给台独份子任何的机会。--伟大的落伍者<font color="#c60a00">MJJ</font>的！他继承了中华人民共和国的光荣传统。黑客、红客、高手在这一刻再一次灵魂附体，落伍者<font color="#c60a00">MJJ</font>的一个人代表了中国红客悠久的历史和传统...", "blog_link_text" : "http://taiwan9.blog.163.com/", "blog_link" : "http://taiwan9.blog.163.com...", "blog_title" : "" }, { "url" : "http://liuyingsheng.blog.163.com/blog/static/28302486200762184036438", "title" : "(转载)建立绝密文件夹的超强方法", "author" : "liuyingshe...", "publish_date" : 1184978436000, "format_publish_date" : "2007年7月21日", "length" : 1266, "format_length" : "1千余", "position" : 109, "summary" : "例如，我想在E盘建立一个 <font color="#c60a00">MJJ</font> 的文件夹，正常建立方法大家都知道，现在我介绍另一种方法，可以很好 的防止外人打开你的文件夹。方法...运行输入CMD后回车 ２、在CMD模式下，使用MD 命令建立文件夹，键入“md e:\<font color="#c60a00">MJJ</font>..\”，引号...", "blog_link_text" : "http://liuyingsheng.blog.163.com/", "blog_link" : "http://liuyingsheng.blog.16...", "blog_title" : "涛" }, ] };

孤魂

系统显示mjj

xiongyujie37

谢谢 孤魂 和 沦陷今生

我会了 自定义 格式为

"url" : "[参数]"


挖哈哈  成功了。。。

xiongyujie37

系统显示 孤魂有JJ    88888888888888888888KG  8888888888888888888KM




计算有多大多重多长中。。。。


呵呵

chenfy

看来又学到了一招，呵呵