WebCollector 解析
关注
分享
扫一扫
jtf111
这个作者很懒，什么都没留下…
展开
-
WebCollect爬虫 之Fetcher 抓取器解析
WebCollect爬虫 之Fetcher 抓取器解析 上一篇写了WebCollect的核心类Crawer知道了爬虫启动过程 这篇编写Fetcher 抓取器解析 // dbManager 数据Url 管理器 ,由Crawer set public DBManager dbManager; // 实际 从datum 中获取数据并处理,下一个任务, 由Crawer set public Executor executor; // 下一个任务URL 的过滤器, 由Crawer set原创 2020-07-17 15:50:46 · 533 阅读 · 0 评论 -
WebCollector 爬虫解析
WebCollector 爬虫解析 WebCollection 爬虫核心类 cn.edu.hfut.dmic.webcollector.crawler.Crawler protected int status; //运行状态 public final static int RUNNING = 1;// 运行状态 运行中 public final static int STOPED = 2; // 运行状态 停止 protected boolean resumable = f原创 2020-07-17 15:06:54 · 549 阅读 · 0 评论