Python爬虫系列之----Scrapy

一、环境

Windows10 64位
Python3.6.1 64位

二、安装Python3.x

 

去官网下载3.x的安装包: https://www.python.org/downloads/ 下载下来之后

 

 

点击进行安装

 

 

选择添加到环境变量中去

 

 

下一步

 

 

点击安装

 

 

 

 

安装成功

 

 

 

测试是否安装成功，在CMD下输入python

 

 

安装成功!!

 

 

三、安装Scrapy


先安装一些依赖:http://download.youkuaiyun.com/detail/u011781521/9815204

 

 

通过命令:pip install xxxx 安装以下文件

 

安装lxml-3.7.3-cp36-cp36m-win_amd64.whl

安装zope.interface-4.3.3-cp36-cp36m-win_amd64.whl
安装pywin32-221-cp36-cp36m-win_amd64.whl
安装Twisted-17.1.0-cp36-cp36m-win_amd64.whl
通过pip安装OpenSSL: pip install pyOpenSSL
 

 

安装之后验证scrapy依赖项是否安装成功的方法：

cmd执行python进入python控制台

● 执行import lxml，如果没报错，则说明lxml安装成功。
● 执行import twisted，如果没报错，则说明twisted安装成功。
● 执行import OpenSSL，如果没报错，则说明OpenSSL安装成功。
● 执行import zope.interface，如果没报错，则说明zope.interface安装成功。





然后安装Scrapy

 

 

pip install scrapy==1.1.0rc3

 

 

 

安装成功!!!

也可以不安装依赖,直接通过pip安装指定版本:

 

 

pip install scrapy==1.1.0rc3

 

 

pip不仅能把需要的包下载下来，而且会把相关依赖包，给下载下来，这是pip的优势所在。

--------------------- 本文来自 lfendo 的优快云 博客 ，全文地址请点击：https://blog.youkuaiyun.com/u011781521/article/details/70177291?utm_source=copy