ASP.NET C# 小偷/采集类

最新推荐文章于 2019-08-04 05:01:59 发布

weixin_34319111

最新推荐文章于 2019-08-04 05:01:59 发布

阅读量56

点赞数

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/0754ydj/archive/2008/11/24/1340044.html

本文介绍了一种使用C#实现的网页数据抓取方法，包括获取网页源码及从源码中截取特定内容的技术。该方法利用了System.Net命名空间下的WebClient类来下载网页数据，并提供了两种不同的字符集选项。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

小偷程序类

Code
using System;
using System.Net;
using System.Text;

/// <summary>
/// Collect 的摘要说明
/// </summary>
public class Collect
{
 // 获取网页源码
 public static string GetHttpPage(string HttpUrl, bool CharSet)
 {
 WebClient wc = new WebClient();
 byte[] PageData = wc.DownloadData(HttpUrl);
 string PageHtml;
 if(CharSet)
 PageHtml = Encoding.Default.GetString(PageData);
 else
 PageHtml = Encoding.UTF8.GetString(PageData);
 return PageHtml;
 }

 // 截取字符串
 public static string GetBody(string Constr, string StartStr, string OverStr, bool IncluL, bool IncluR)
 {
 string ConstrTemp;
 int Start, Over;
 ConstrTemp = Constr.ToLower();
 StartStr = StartStr.ToLower();
 OverStr = OverStr.ToLower();

 Start = ConstrTemp.IndexOf(StartStr) + StartStr.Length;
 if (IncluL)
 {
 Start -= StartStr.Length;
 }
 ConstrTemp = ConstrTemp.Substring(Start);

 Over = ConstrTemp.IndexOf(OverStr);
 if (IncluR)
 {
 Over += OverStr.Length;
 }
 ConstrTemp = ConstrTemp.Substring(0, Over);

 return ConstrTemp;
 }
}

转载于:https://www.cnblogs.com/0754ydj/archive/2008/11/24/1340044.html