windows下搭建python的scrapy爬虫框架

方法一：

如果使用的是Anaconda，可以在conda-foge 安装Scrapy最新版。conda安装运行以下命令。

conda install -c conda-forge Scrapy

方法二

pip install Scrapy

安装所需依赖包

库	作用
lxml	解析XML和HTML工具
parsel	数据提取
w3lib	网页解码
twisted	异步网络编程框架
cryptography	用于加密
pyOpenSSL	进行一些加解密操作

• 依赖包的安装方法：新建bag.txt,把库放入bag.txt文件，在终端输入：pip install -r bag.txt(保存终端路径与bag.txt文件路径一致）
• pip安装出现网络超时，可以在官网下载库,一般为wheel文件，可以先下载好，把后缀名改为.zip，解压后，把解压的内容移到下面site-packages下。（注意版本方面）
•