火车采集器软件交流官方论坛

 找回密码
 加入会员
搜索
火车采集器V9版免费下载火车浏览器 - 可视采集,万能群发,全自动脚本工具
查看: 4414|回复: 3

关于.NET技术.. 求火车头技术人员帮帮我!!

[复制链接]
发表于 2011-1-21 16:19:07 | 显示全部楼层 |阅读模式
1火车车厢
#region 获取远程文件源代码
        /// <summary>
        /// 获取远程文件源代码
        /// </summary>
        /// <param name="url">远程url</param>
        /// <param name="EnCodeType">编码</param>
        /// <returns></returns>
        public string GetHttpPageCode(string Url, Encoding EnCodeType)
        {
            string strResult = string.Empty;
            if (Url.Length < 10)
                return "$UrlIsFalse";
            try
            {
                //WebClient MyWebClient = new WebClient();
                //MyWebClient.Credentials = CredentialCache.DefaultCredentials;
                //MyWebClient.Encoding = EnCodeType;
                //strResult = MyWebClient.DownloadString(Url);
                string rl;
                WebRequest myReq = WebRequest.Create(Url);
                WebResponse myRes = myReq.GetResponse();
                Stream resStream = myRes.GetResponseStream();
                StreamReader sr = new StreamReader(resStream, EnCodeType);
                StringBuilder sb = new StringBuilder();
                while ((rl = sr.ReadLine()) != null)
                {
                    sb.Append(rl);
                }
                strResult = sb.ToString();
                myRes.Close();

            }
            catch (Exception)
            {
                strResult = "$GetFalse";
            }
            return strResult;
        }
        #endregion


采集地址为:  http://hy.58.com/danche/


问题:采集得到的STRING   根本不是原来的源文件..  

求版主或会的朋友..救下我..为什么..为什么只有58网的列表我取不了!!

发表于 2011-1-21 22:13:59 | 显示全部楼层
把你调用代码贴出来..还有就是注意你编码传入的值是否与网站一样.....
发表于 2011-1-22 11:33:42 | 显示全部楼层
比如访问网址 http://hy.58.com/danche/ ,它的代码可能就是
  1. private bool Request_hy_58_com(out HttpWebResponse response)
  2. {
  3.         response = null;

  4.         try
  5.         {
  6.                 HttpWebRequest request = (HttpWebRequest)WebRequest.Create("http://hy.58.com/danche/");

  7.                 request.UserAgent = "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.2.3) Gecko/20100401 Firefox/3.6.3 QQDownload/1.7";
  8.                 request.Accept = "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8";
  9.                 request.Headers.Set(HttpRequestHeader.AcceptLanguage, "zh-cn,zh;q=0.5");
  10.                 request.Headers.Set(HttpRequestHeader.AcceptEncoding, "gzip,deflate");
  11.                 request.Headers.Set(HttpRequestHeader.AcceptCharset, "GB2312,utf-8;q=0.7,*;q=0.7");
  12.                 request.Headers.Add("Keep-Alive", "115");
  13.                 request.KeepAlive = true;
  14.                 request.Headers.Set(HttpRequestHeader.Cookie, @"id58=902X00yN6PRafhZUYhrSAg==; __utma=253535702.348090455.1284368626.1295331116.1295600481.14; __utmz=253535702.1295331116.13.6.utmcsr=news.qq.com|utmccn=(referral)|utmcmd=referral|utmcct=/zt2010/2011chunyun/; Hm_lvt_84617e905c7416b9895edacb8dbb7ccb=1284432009871; city=hf; www58com=AutoLogin=True&UserID=17246605&UserName=rq204&CityID=483&Email=wddh007%40126.com&MsgReadTotal=0&MsgUnReadTotal=0&AllMsgTotal=0&SystemReadTotal=0&SystemUnReadTotal=0&RequireFriendReadTotal=0&RequireFriendUnReadTotal=0&CommentReadTotal=0&CommentUnReadTotal=0&UserCredit=10&UserScore=0&PurviewID=F&IsAgency=false&Agencys=&SiteKey=08CDD29DF3C9758877EEE3E5CC46D4B5C5B5F9D5736CA5ECD&Phone=&WltUrl=&UserLoginVer=08CDD29DF3C9758870561B84B2BE5BCC3; caipiao=B5D0C5B56295AB0C");

  15.                 response = (HttpWebResponse)request.GetResponse();
  16.         }
  17.         catch (WebException e)
  18.         {
  19.                 if (e.Status == WebExceptionStatus.ProtocolError) response = (HttpWebResponse)e.Response;
  20.                 else return false;
  21.         }
  22.         catch (Exception)
  23.         {
  24.                 if(response != null) response.Close();
  25.                 return false;
  26.         }

  27.         return true;
  28. }
复制代码
发表于 2011-1-22 23:52:06 | 显示全部楼层
- -收藏下..、、、、、、、、、、、、、、、、、、、、、、、、、、、、、、、、、、、、、、
您需要登录后才可以回帖 登录 | 加入会员

本版积分规则

QQ|手机版|Archiver|火车采集器官方站 ( 皖ICP备06000549 )

GMT+8, 2024-11-23 22:18

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表