Python爬虫之Scrapy框架安装

本文详细介绍了Python环境的搭建过程,包括Python、pywin32、pip、pyOpenSSL、lxml及Scrapy等关键组件的安装步骤与验证方法。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

安装指南:http://scrapy-chs.readthedocs.io/zh_CN/latest/intro/tutorial.html#

原文地址:http://cuiqingcai.com/912.html

1.安装python

python下载地址:http://twistedmatrix.com/Releases/Twisted/

 python安装教程:http://www.runoob.com/python/python-install.html

2.安装pywin32

在windows下,必须安装pywin32

下载地址:http://www.jb51.net/softs/416126.html

3.安装pip

下载get-pip.py文件:https://bootstrap.pypa.io/get-pip.py

下载好之后,选中该文件所在路径,执行以下命令:python get-pip.py   

执行命令后便会安装好pip,并且同时,它帮你安装了setuptools

在命令行输入: pip --version  验证pip是否安装成功

输入easy_install 回车,进行检测setuptools 是否安装成功
如果提示: 
error: No urls, filenames, or requirements specified (see –help) //说明安装成功,它在提示你命令后面需要跟参数。
4.安装pyOPENSSL

在Windows下,是没有预装pyOPENSSL的,而在Linux下是已经安装好的。

可在cmd中用下载命令:python -m pip install pyOpenSSL安装,下载地址:https://launchpad.net/pyopenssl

选择对应的python版本和电脑版本下载安装即可

在python环境下 引用 OpenSSL模块    import OpenSSL 回车,来验证OpenSSL是否安装成功

5.安装 lxml

pip install lxml

在python环境下 输入 import lxml 回车,不报错就说明安装成功

6.安装Scrapy

pip install Scrapy

pip 会另外下载其他依赖的包,这些就不要我们手动安装了。

输入 Scrapy 验证是否安装成功

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值