本文介绍了如何在Eclipse中导入webmagic源码，通过maven插件进行操作，详细步骤包括选择file>import，导入解压后的webmagic文件夹，并展示了成功导入后的项目结构。通过运行GithubRePageProcessor.java来验证导入是否成功。接着简要分析了webmagic爬虫框架的自定义过程，关键在于定制PageProcessor，然后创建Spider对象并运行以获取爬取结果。
在笔记（2）中我们已经安装好了eclipse的m2e插件，以maven为构建工具的webmagic源码就可以导入到eclipse中了。
1.导入源码。
步骤如下：
打开eclipse file>import。在新弹出的导入项目对话框中会出现maven选项。如图
选择next一路下去，最终找到你的源码所在路径，将共计5将解压后的webmagic文件夹导入。
导入后eclipse下文件树如图：
在下图所示目录下有演示Demo，可以验证是否导入成功。
该目录下有几个是我自己写的Demo，如果是刚导入的，可以试运行GithubRePageProcessor.java
若运行后出现以下信息，则
最低0.47元/天 解锁文章
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
