获取指定页面的HTML源码

最新推荐文章于 2016-07-13 22:11:35 发布

原创最新推荐文章于 2016-07-13 22:11:35 发布 · 369 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#html #string #stream #windows #encoding #2010

C# 专栏收录该内容

2 篇文章

订阅专栏

本文介绍了一种通过C#实现的网页源代码获取方法，利用HttpWebRequest和HttpWebResponse进行网络请求，支持自定义编码方式，确保能正确解析不同网页的字符集。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

/// <summary> /// 获取指定页面的HTML源码 /// </summary> /// <param name="PageURL">目标网页地址</param> /// <param name="Encode">编码方式</param> /// <returns>目标网页源文件的HTML字符串</returns> public string GetPageCode(string PageURL, Encoding Encode) { //存放目标网页的html string strHtml = string.Empty; HttpWebResponse wresp; try { //连接到目标网页 WebRequest wreq = WebRequest.Create(PageURL); wresp = (HttpWebResponse)wreq.GetResponse(); } catch (WebException ex) { wresp = (HttpWebResponse)ex.Response; } //采用流读取，并确定编码方式 StreamReader objReader = new StreamReader(wresp.GetResponseStream(), Encode); return strHtml = objReader.ReadToEnd(); }

调用：

string PageCode = GetPageCode(url, Encoding.GetEncoding("gb2312"));

于2010-09-06补上net_lover【孟子E章】方法：

//获取指定页面的源代码 public String GetPageCode(String PageURL, String Charset) { String strHtml = ""; try { //连接到目标网页 HttpWebRequest wreq = (HttpWebRequest)WebRequest.Create(PageURL); wreq.Method = "GET"; wreq.UserAgent = "Mozilla/5.0 (Windows; U; Windows NT 6.1; zh-CN; rv:1.9.2.8) Gecko/20100722 Firefox/3.6.8"; HttpWebResponse wresp = (HttpWebResponse)wreq.GetResponse(); //采用流读取，并确定编码方式 Stream s = wresp.GetResponseStream(); StreamReader objReader = new StreamReader(s, System.Text.Encoding.GetEncoding(Charset)); strHtml = objReader.ReadToEnd(); objReader.Close(); return strHtml; } catch(WebException ex) { HttpWebResponse res = ex.Response as HttpWebResponse; if (res.StatusCode == HttpStatusCode.InternalServerError) { Stream s = res.GetResponseStream(); StreamReader objReader = new StreamReader(s, System.Text.Encoding.GetEncoding(Charset)); strHtml = objReader.ReadToEnd(); objReader.Close(); } else { strHtml = ex.Message; } return strHtml; } }