练习题偶失败鸟。。。采不到网易博客搜索（已解决，谢谢孤魂，沦陷今生二位大虾）

xiongyujie37 发表于 2008-9-4 22:33:53

思路采集搜索之后的结果，把很少被人采集的到东东也采集到，避免大量重复内容被K

搜索之后的结果，主题相关性也比较高

我们拿网易博客开刀

HOHO~~~

第一步，打开：http://blog.163.com/search

第二部：打开抓包工具，搜索 locoy

第三步，查看抓包POST信息

问题出来了。。。奇怪的是。。。。抓包POST 没有任何信息。。。。。

我很郁闷。。。。

因为使用 GET 根本什么有用的网址都抓不到。。。。

今日练习题，彻底失败。。。。真搞不清楚，是用post采集还是用get 采集，究竟怎么采。。。（

[ 本帖最后由 xiongyujie37 于 2008-9-4 23:48 编辑 ]

孤魂发表于 2008-9-4 23:06:47

http://blog.yodao.com/search?keyfrom=163.js&doctype=js&ue=gbk&keyfrom=163.js&site=blog.163.com&t=a&start=100&length=10&q=mjj&sortbydate=0&referer=http%3A%2F%2Fblog.163.com%2Fsearch%3Ft%3Dblog%26o%3Dall%26q%3Dmjj%26s%3Dr%26p%3D7#何必那么复杂呢，就是ＧＥＴ就采集了

xiongyujie37 发表于 2008-9-4 23:16:41

孤魂你这个地址什么都采不到。。。

[ 本帖最后由 xiongyujie37 于 2008-9-4 23:19 编辑 ]

沦陷今生 发表于 2008-9-4 23:22:49

2楼的正解
3楼的用自定义链接

xiongyujie37 发表于 2008-9-4 23:33:25

var response = { "grossDocNum" : 584, "availDocNum" : 584, "start" : 100, "query" : "mjj", "elapsedTime" : "0.553", "hits" : [ { "url" : "http://blog.163.com/2yn_1ov3/blog/static/84870656200852743352448", "title" : "你是蛾的姐妹，你是我的baby。", "author" : "2yn_1ov3", "publish_date" : 1214555632000, "format_publish_date" : "2008年6月27日", "length" : 210, "format_length" : "2百余", "position" : 100, "summary" : "蛾伤心难过、都是你安慰蛾。蛾一直一直都想告诉你，很爱很爱你，有时候很想你，但我不能告诉你。...但、蛾还是好希望，我们要一直在一起。mjj,蛾永远的好姐妹。记着你的笑，记着你的好。怎么能够忘掉？你是蛾的姐妹，你是蛾的Ba6y，珍爱这感觉、", "blog_link_text" : "http://blog.163.com/2yn_1ov3", "blog_link" : "http://blog.163.com/2yn_1...", "blog_title" : "吢淡、" }, { "url" : "http://symr0801.blog.163.com/blog/static/26162738200722655616533", "title" : "周末了！", "author" : "symr0801", "publish_date" : 1174902976000, "format_publish_date" : "2007年3月26日", "length" : 241, "format_length" : "2百余", "position" : 101, "summary" : "这个周末一洗上周阴霾的天气，太阳终于出来了，温暖的阳光下让人觉得北京真的进入春天了！...外面大好的阳光真是觉得浪费了可惜，本想去mjj家里打牌做好吃的，由于马瑞家的小朱要陪父母，五缺一，自然就延期了！在没有目标的情况下我和老公还是决", "blog_link_text" : "http://symr0801.blog.163.com/", "blog_link" : "http://symr0801.blog.163.c...", "blog_title" : "相伴到永远!" }, { "url" : "http://songjingyubin.blog.163.com/blog/static/663113092008731103243313", "title" : "暑假最后一个周末", "author" : "阿甘正传", "publish_date" : 1220149963000, "format_publish_date" : "2008年8月31日", "length" : 197, "format_length" : "1百余", "position" : 102, "summary" : "我要告别我的网络生活拉！趁着这个周末，我看了很多电影理发师陶德，this is depp.这可是MJJ的偶像。这是一个巨大的悲剧。陶德杀死了他的老婆。自己也被杀死了。我觉得很好看！还有就是high school musical.这是同位推荐的我觉得女主角还是...", "blog_link_text" : "http://songjingyubin.blog.163.com/", "blog_link" : "http://songjingyubin.blog.1...", "blog_title" : "樱桃家````ざ" }, { "url" : "http://jimmajin.blog.163.com/blog/static/38855023200752792310", "title" : "珍惜", "author" : "jimmajin", "publish_date" : 1182950581000, "format_publish_date" : "2007年6月27日", "length" : 400, "format_length" : "4百余", "position" : 103, "summary" : "今天我们都从圃田回来了。所有的乡都结束了。森清的工作完毕了。现在回想起来。。。一个多月的时间过的真快。以前总是盼望着早点结束。可是当今天我离开的时候是多...也没有人给我摘桃子吃了也许人都是这样失去后才懂得珍惜 MJJ 2007 6 27", "blog_link_text" : "http://jimmajin.blog.163.com/", "blog_link" : "http://jimmajin.blog.163.co...", "blog_title" : "cici" }, { "url" : "http://blog.163.com/sunshine0207@126/blog/static/245595222007175432147", "title" : "请等待", "author" : "sunshine...", "publish_date" : 1170841401000, "format_publish_date" : "2007年2月7日", "length" : 239, "format_length" : "2百余", "position" : 104, "summary" : "各位JJMM：收到廖管命令，立马克服重重困难上网，唯恐愧对了大家的期待。本来想把我们的合照作为头像，可惜文件太大了，容我再想想办法。还有廖管让我写的“酸文”，还在酝...感谢MJJ(马姐姐），照片很不错，我很久没这么上相了，开心啊！", "blog_link_text" : "http://blog.163.com/sunshine0207@126", "blog_link" : "http://blog.163.com/sunsh...", "blog_title" : "sunshine的博客" }, { "url" : "http://courage.hanxuan.blog.163.com/blog/static/781583612008428727933", "title" : "5.28", "author" : "゛ヤ. /錒...", "publish_date" : 1211974029000, "format_publish_date" : "2008年5月28日", "length" : 210, "format_length" : "2百余", "position" : 105, "summary" : "今天值周三天了早上站岗的时候天居然下雨害我们撑着雨伞站在那边我和mjj同学还撑着吧粉红的（汗。。。jj还说这叫有个性）下午花头精色透的学校还组织踢毽和跳绳子比赛很好很强大的我不知为什么作为男生踢毽子比女生还要厉害不知道算有面...", "blog_link_text" : "http://courage.hanxuan.blog.163.com/", "blog_link" : "http://courage.hanxuan.blo...", "blog_title" : "゛ヤ. /錒幹的博..." }, { "url" : "http://blog.163.com/han_xue1129/blog/static/27584299200763112231564", "title" : "初识大海", "author" : "han_xue1...", "publish_date" : 1183432951000, "format_publish_date" : "2007年7月3日", "length" : 223, "format_length" : "2百余", "position" : 106, "summary" : "周末MJJ开车带我去了新戴河，从北京出发4个小时的路程，中午吃完饭我就一直催他快点去换游泳衣，我要去看大海。这是我第一次身临其境和大海有亲密的接触，心里相当地激动啊！嘿嘿，踩在沙滩上，细细的沙砾印着我的脚印，连心里都痒痒的。", "blog_link_text" : "http://blog.163.com/han_xue1129", "blog_link" : "http://blog.163.com/han_x...", "blog_title" : "雪雪的小屋" }, { "url" : "http://dimwall.blog.163.com/blog/static/99346032006990424238", "title" : "玩起了游戏", "author" : "dimwall", "publish_date" : 1160325762000, "format_publish_date" : "2006年10月9日", "length" : 94, "format_length" : "94", "position" : 107, "summary" : "最近无聊，玩起了一个游戏，自己一直很讨厌网游，没想到也玩上了好像叫个QQ幻想什么的。不过现在有点玩够了真的是无聊的人玩的有时候静不下心来去玩很烦的走来走去总感觉在做着重复的动作MJJ。", "blog_link_text" : "http://dimwall.blog.163.com/", "blog_link" : "http://dimwall.blog.163.com...", "blog_title" : "梵高印象" }, { "url" : "http://taiwan9.blog.163.com/blog/static/40587997200771232828988", "title" : "taiwan9.com首页再次被改", "author" : "taiwan9", "publish_date" : 1186903708000, "format_publish_date" : "2007年8月12日", "length" : 1243, "format_length" : "1千余", "position" : 108, "summary" : "被黑了！落伍者MJJ的又立功了，落伍者MJJ的又立功了！不要给台独份子任何的机会。--伟大的落伍者MJJ的！他继承了中华人民共和国的光荣传统。黑客、红客、高手在这一刻再一次灵魂附体，落伍者MJJ的一个人代表了中国红客悠久的历史和传统...", "blog_link_text" : "http://taiwan9.blog.163.com/", "blog_link" : "http://taiwan9.blog.163.com...", "blog_title" : "" }, { "url" : "http://liuyingsheng.blog.163.com/blog/static/28302486200762184036438", "title" : "(转载)建立绝密文件夹的超强方法", "author" : "liuyingshe...", "publish_date" : 1184978436000, "format_publish_date" : "2007年7月21日", "length" : 1266, "format_length" : "1千余", "position" : 109, "summary" : "例如，我想在E盘建立一个 MJJ 的文件夹，正常建立方法大家都知道，现在我介绍另一种方法，可以很好的防止外人打开你的文件夹。方法...运行输入CMD后回车２、在CMD模式下，使用MD 命令建立文件夹，键入“md e:\MJJ..\”，引号...", "blog_link_text" : "http://liuyingsheng.blog.163.com/", "blog_link" : "http://liuyingsheng.blog.16...", "blog_title" : "涛" }, ] };

孤魂发表于 2008-9-4 23:41:57

系统显示mjj

xiongyujie37 发表于 2008-9-4 23:47:30

谢谢孤魂和沦陷今生

我会了自定义格式为

"url" : "[参数]"

挖哈哈成功了。。。

xiongyujie37 发表于 2008-9-4 23:50:30

回复 6楼的帖子

系统显示孤魂有JJ 88888888888888888888KG8888888888888888888KM

ali18ls

计算有多大多重多长中。。。。

呵呵

chenfy 发表于 2008-9-5 07:52:58

看来又学到了一招，呵呵:ali12ls :ali12ls :ali12ls

页: [1]

火车采集器软件交流官方论坛's Archiver

练习题 偶失败鸟。。。采不到网易博客搜索（已解决，谢谢孤魂，沦陷今生二位大虾）

回复 6楼 的帖子

练习题偶失败鸟。。。采不到网易博客搜索（已解决，谢谢孤魂，沦陷今生二位大虾）

回复 6楼的帖子