Win10下scrapy环境搭建 - python3.5

最新推荐文章于 2022-09-30 17:50:51 发布

原创最新推荐文章于 2022-09-30 17:50:51 发布 · 299 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#scrapy #Anaconda #python

scrapy-爬虫专栏收录该内容

1 篇文章

订阅专栏

本文介绍如何在Windows环境下通过安装Visual Studio 2015、Anaconda4.2.0等工具来配置Scrapy爬虫环境，并解决安装过程中可能出现的问题。

Python3.8

Conda

Python

Python 是一种高级、解释型、通用的编程语言，以其简洁易读的语法而闻名，适用于广泛的应用，包括Web开发、数据分析、人工智能和自动化脚本

基本步骤

安装 Visual Studio 2015
安装 Anaconda 4.2.0
安装 scrapy
安装 pyasn1-modules

重点步骤讲解

首先，Visual Studio 2015必须安装，是因为scrapy依赖的twisted包需要Visual C++ 2014的编译环境。

Visual C++ 2015

安装Anaconda 4.2.0的时候找到自己机器需要的系统和系统位数。

Anaconda

在Anaconda的终端输入pip install scrapy即可自动安装scrapy及其依赖包。

scrapy

安装完成后终端输入scrapy -h，如果出现警告信息：you do not have a working installation of the service identity_module，则需输入pip install pyasn1-modules 安装最新的pyasn1-modules包。安装完成后，再次输入scrapy -h，警告信息消失，安装Scrapy完成。

这里写图片描述