C# 取得网址源码

最新推荐文章于 2021-05-12 11:45:37 发布

weixin_34007879

最新推荐文章于 2021-05-12 11:45:37 发布

阅读量69

点赞数

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/sulong/p/5015546.html

本文介绍如何利用C#中的HttpWebRequest类实现网页内容的抓取，包括设置请求头、处理响应及读取网页源码的过程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

HttpWebRequest wwb = (HttpWebRequest)WebRequest.Create(url);
wwb.UserAgent = "Mozilla/5.0";//用户代理；与浏览器相关；没有的话，可能会导致GetResponse()
wwb.ContentType = "text/html; charset=UTF-8";
wwb.Method = "GET";
WebResponse wwebRes = null;// (HttpWebResponse)wwb.GetResponse();
Stream wwebStream = null;
StreamReader sssr = null;// new StreamReader(wwebRes.GetResponseStream(), Encoding.GetEncoding("UTF-8"));
//string sstrHtml;
StringBuilder sb = new StringBuilder();
try
{
wwebRes = (HttpWebResponse)wwb.GetResponse();
}
catch (WebException ex)
{
//wwebRes = (HttpWebResponse)ex.Response;//错误信息
return "";
}
finally
{
//及时释放资源
if (wwebRes != null)
{
wwebStream = wwebRes.GetResponseStream();
sssr = new StreamReader(wwebRes.GetResponseStream(), Encoding.GetEncoding("UTF-8"));
//获得网页源码
string str1 = null;
while ((str1 = sssr.ReadLine()) != null)
{
sb.Append(str1);
}
// sstrHtml = sssr.ReadToEnd();
wwebStream.Close();
sssr.Close();
wwebRes.Close();
wwb.Abort();
}
}