有思想的zhanghu

 在论坛上面看到一个爬虫工具Arachnid Web Spider Framework，看了一下源代码，相当的简练和漂亮。所以决定在这个上面做点东西出来1.实现除html以外的页面的检索和分析，例如wap网页等，做成基于手机的搜索引擎。2.把tomcat，j2sdk等嵌入到代码中，并嵌入简单的纯java的数据库，例如hsqldb，完善爬虫功能。3.制作一个图形换的管理控制台，可以对抓取的范...

Arachnid Web Spider Framework的文档只有一个英文的，如下Arachnid Web Spider FrameworkDescriptionArachnid is a Java-based web spider framework. It includes a simple HTML parser object that parses an input stream...

PageInfo.java是一个页面对象。它抽象了页面的主要元素，并且封装了取得那些元素的方法。public URL getUrl() { return(url); }\\取得页面的url public URL getParentUrl() { return(parentUrl); }\\ public String getTitle() { return(title); } pu...