wjh_init的博客

Python爬虫学习2 Requests库的安装 在经过上一节的学习过后，我们已经安装了Python和相应的IDE,现在就让我们开始正式的Python爬虫的学习。 首先，我们需要安装Resquest库。 下面对Requests库做出简单说明，想要更深层次了解Requests，请自行百度。Requests的官方网站为：http://www.python-requests.org 说明 R

Python爬虫学习1 Python爬虫简述 首先说明这个专题是博主打算进行正规的系统学习Python爬虫这部分内容，是根据中国大学MOOC中的课程进行的总结和自己的理解。在文章的最后会给出中国大学MOOC的相关链接。 什么是爬虫？ 关于这个问题可能大家都会有自己的一些理解，在这里我就给出一个我觉得较为准确又易理解的解释。下文来源于知乎作者黄哥 网络蜘蛛（Web spider）也叫网

简述 在本文中将从爬虫规模出发，进行爬虫的“盗亦有道”分析 爬虫规模 首先我们来看一下 小规模，数据量小，爬取速度不敏感，一般使用Requests库，用于爬取一些网页。一般占到网络爬虫的百分之九十以上。（PS：如果有不太了解Requests库的可以参考以下博主前面的文章或者其他网络资源） 中规模，数据规模较大，爬取速度敏感，一般可以使用Scrapy框架，用于爬取网站和系列网站