python scrapy 环境搭建

scrapy的安装算比较麻烦，如果实在怕麻烦就下载Anaconda，安装过程就简单很多，后面的内容也就不用看了。

这里介绍的是windows环境+python3的安装过程。

---

安装过程出的问题主要是依赖包的安装。
一、C++ 14 的支持

安装文件比较麻烦，有C币的话，优快云有很多链接。这里给一个百度云链接：
链接：https://pan.baidu.com/s/1IhuSWU--9_Pi5E3-oLNYRw
提取码：q9l9

二、Twisted 的支持
scrapy 是在Twisted 框架上开发的，自然需要安装Twisted 包。

pip install twisited

三、安装scrapy

pip install scrapy

---

当然这是最顺利的情况。不同的操作系统、不同的python 版本，可能还会有一些小问题，提示也都比较清晰，这里就不罗列了。

特别说明一下，pip 安装有可能失败，那就只有手动下载安装包

补充手动下载安装包：
1、pypi.org 查找包，通常会有"whl" 、“tar.bz2” 、“tar.gz” 三种封装方式，随便选择一个

注意如果有win32/ 64 标志的包，需要按照你的操作系统选择。

2、使用pip 进行安装

pip install Twisted-17.9.0-cp27-cp27m-win_amd64.whl 
pip install Twisted-17.9.0.tar.bz2 
pip install xlrd-0.9.4.tar.gz