Python3 安装Scrapy

最新推荐文章于 2020-11-22 18:40:28 发布
最新推荐文章于 2020-11-22 18:40:28 发布
阅读量344 收藏
点赞数 2
CC 4.0 BY-SA版权
分类专栏： Python Scrapy
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/momoThree/article/details/85062731
在已安装Python3.7的基础上，通过下载Lxml、Twisted、Scrapy的对应whl文件并逐一安装，包括使用pip3安装wheel、lxml、Twisted和Scrapy，接着下载并安装pywin32，最后通过验证Python环境确认Scrapy安装成功，并创建首个Scrapy项目loldemo。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

前提： 已经安装好了 Python3 了。我的版本是3.7的。

安装Scrapy

  1. 安装Scrapy之前，首先检查你的Python 版本：cmd -> python
    检查版本2. 下载相对应的包
        下载地址：https://www.lfd.uci.edu/~gohlke/pythonlibs/
        Ctrl+F搜索Lxml、Twisted、Scrapy。下载，根据你的Python版本+位数（AMD64）下载。
    LXML
    TwistedScrapy

将下载好的文件放在统一放在文件夹里面。我的放在Scrapy中。

3.然后通过cd 定位到scrapy文件中，将三个文件安装一下。
文件目录
4.依次执行如下命令
1). pip3 install wheel
在这里插入图片描述
2). pip3 install lxml-4.2.5-cp37-cp37m-win_amd64.whl
在这里插入图片描述
我这个是已经安装好了。
3). pip3 install Twisted-18.9.0-cp37-cp37m-win_amd64.whl
在这里插入图片描述
4). pip3 install Scrapy-1.5.1-py2.py3-none-any.whl
在这里插入图片描述最后就安装完成了Scrapy。

5). Srapy已经安装成功，还要下载pywin32，找到对应版本下载，一路下一步安装即可。安装完成后，就可以正常使用Scrapy了。
3.6级3.6以下的下载：https://sourceforge.net/projects/pywin32/files/pywin32/Build 220/
3.7版本下载：https://sourceforge.net/projects/pywin32/files/pywin32/Build 221/
在这里插入图片描述

  1. 安装完成之后，验证一下是否安装好。找到Python 的安装目录。python.exe执行，点击执行之后，没有报错就可以了。
    在这里插入图片描述

最后创建项目： cd 定位到你的工作目录，创建一个scrapy项目loldemo。
输入： scrapy startproject loldemo
在这里插入图片描述

然后就可以在你的工作目录看到你的项目loldemo。

Python安装Scrapy
weixin_42224342的博客
05-23 472
一、首先安装wheel    在cmd中首先找到Python文件夹，然后输入pip install wheel二、安装lxml    去http:www.lfd.uci.edu/~gohlke/pythonlibs/#lxml上下载相应的lxml进行安装，输入pip install xxx.whl（XXX为你所下载的lxml文件名称）三、安装zope.interface   cmd中输入 pyth...
Python3安装Scrapy的方法步骤
12-24
本文介绍了Python3安装Scrapy的方法步骤，分享给大家，具体如下： 运行平台：Windows Python版本：Python3.x IDE：Sublime text3 一、Scrapy简介 Scrapy是一个为了爬取网站数据提取结构性数据而编写的应用框架，...
Python3网络爬虫(五)：Python3安装Scrapy
热门推荐
Jack-Cui
03-03 8万+
运行平台：Windows Python版本：Python3.x IDE：Sublime text3
python3安装scrapy_Python3下安装Scrapy
weixin_39692045的博客
11-22 156
在windows下安装Scrapy的错误挺多的， 我将我安装成功的步骤发出来，供更多的人参考。首先，直接进入Scrapy网站的文档Installation guide下的 Installing Scrapy下：https://doc.scrapy.org/en/1.2/intro/install.html可以看到安装Scrapy所依赖的包。parsel, w3lib, cryptography, ...
python怎么安装scrapy_详解Python安装scrapy的正确姿势
weixin_39999781的博客
11-20 457
运行平台：WindowsPython版本：Python3.xIDE：Sublime text3一、Scrapy简介Scrapy是一个为了爬取网站数据提取结构性数据而编写的应用框架，可以应用于数据挖掘，信息处理或存储历史数据等一些列的程序中。Scrapy最初就是为了网络爬取而设计的。现在，Scrapy已经推出了曾承诺过的Python3.x版本。为什么学习Scrapy呢？它能我们更好的完成爬虫任务，自...
python3安装scrapy
君子不器的博客
12-13 242
系统：window7 python版本：3.5.0 一、Scrapy简介 Scrapy，Python开发的一个快速、高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。 Scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类，如BaseSpider、si...
python3 安装scrapy报错的解决方法
10-05
以下将详细介绍两种解决Python3环境下安装Scrapy报错的方法。 **方法一：手动下载与安装** 当使用`pip install scrapy`命令时，如果遇到依赖库不兼容或缺失的问题，可以采取手动下载和安装的方式。首先，你需要...
window10系统 64位 Python3.7安装Scrapy教程.docx
02-07
但是，Scrapy的安装过程中经常出现各种问题，本文将详细介绍在Window 10系统64位Python 3.7环境下安装Scrapy的完整教程。 一、前提条件 * 安装Python 3.7（64位） * 安装pip工具 二、安装wheel * 以管理员身份...
python2.7安装Scrapy.docx
12-07
### Python 2.7 下安装 Scrapy 的详细步骤与注意事项 #### 一、前置环境准备 **1. 安装Python 2.7** - **官方文档推荐版本**：Python 2.7.x（此处作者已安装2.7.11版本）。 - **注意事项**：确保安装过程中勾选...
python3 安装scrapy
lq_smile_的博客
02-01 406
刚开始安装我以为和python2一样,直接pip install scrapy 就可以了,但实际上并不是,他总是报错.百度查阅了一些教程成功搞定. 我是装有python2和python3两个版本,所以以下pip我用pip3 1.首先安装twisted库下载地址   找到自己对应版本和操作系统下载,我安装的python3是3.6版本的 2.下载完成后,找到下载路径进行pip安装,
Python3安装Scrapy
amyzhang1234的博客
05-20 167
Microsoft Visual C++ Build Tools 　　最近项目在写爬虫，项目经理给了个Python Scrapy的爬虫项目，要求使用Java实现相关功能。于是乎在本地先后安装了Python3和Scrapy，在安装Scrapy时出现了个小插曲，现在总结如下： 　　第一、安装Scrapy 　　查看网上安装scrapy，网友基本就是告诉你使用命令： pip instal...
python3 安装 Scrapy模块
yangczcsdn的博客
07-31 705
特此说明，直接pip install scrapy  会报错，安装不成功，缺少如下环境。 1.首先在CMD窗口查看所安装的python的版本和位数。 2.打开网址： https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 下载scrapy 所依赖的Twisted模块环境（Twisted也是python的一个比较流行的web开发模块），下载如下图。...
python安装Scrapy
tiegenZ的博客
11-17 1263
python安装Scrapy
python安装scrapy
Shuttle的技术博客
12-20 523
python pip安装 https://pip.pypa.io/en/stable/installing/mac上安装Scrapy.出现six版本过低问题 http://www.jianshu.com/p/b14ea0d2bcb3scrapy安装 pip install scrapyscrapy项目 https://github.com/scrapy/dirbot
Python安装Scrapy(爬虫)框架
******* ▄︻┻┳═一 *******
03-05 2096
在windows还是在linux上，如果我们直接使用pip安装Scrapy，会报错，这是因为scrapy依赖twisted，而twisted需要c++的一个文件，在Windows环境下，那么需要下载.whl文件。 scrapy库的安装是要有很多的库作为基础的，一般学习Scrapy框架的话，这个是第一个坎。建议使用Anaconda安装，这个集成环境。 一、下载安装Anaconda 1、官网...
Python安装scrapy库
Timplan的博客
11-01 3684
由于本人在安装scrapy库的道路上遇到过很多坑，由此不能再坐视不管，来帮帮广大同胞 首先在此网站https://www.lfd.uci.edu/~gohlke/pythonlibs/ 找到twisted库： 在此中间找适合自己电脑配置的文件twisted下载 然后用命令行进入此目录 然后再命令行执行 pip install + "你所下载的那个文件名"+"（注意这里有个点）.wh...
python3安装scrapy及使用方法（爬虫框架）
墨痕诉清风的博客
09-28 954
安装： sudo pip3 install lxml sudo apt-get install python-dev sudo apt-get install build-essential sudo apt-get install libxml2-dev sudo apt-get install libxslt1-dev sudo pip3 install scrapy 介绍：...
Mac环境Python3安装Scrapy详细教程
"这篇教程详细介绍了在Mac操作系统中如何在Python 3环境下安装Scrapy爬虫框架的步骤。首先，需要下载并安装Python 3.6.3版本，然后通过命令行工具验证Python 3是否安装成功。接着，使用pip命令安装Scrapy，这个过程...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值