weixin_43774331的博客

本次案例主要是爬取豆瓣读书的标签列表以及每个标签下的书籍名称、对应的URL，然后输出到控制台。 1、引入webmagic的依赖 <!-- webmagic爬虫 --> <dependency> <groupId>us.codecraft</groupId> <artifactId&

1、下载phantomjs。phantomjs的下载地址：http://npm.taobao.org/dist/phantomjs/ 2、将压缩包解压到自己选择的一个地址（我选的是D:\software\phantomjs） 3、编写js文件，我将js文件放在D:\software\phantomjs\codes.js，该路径会在java程序中以绝对路径调用。 //codes.js system ...