关于Scrapy在Win10上的安装问题

win10系统下Python3.9.0安装Scrapy步骤、所遇问题及解决方法 安装步骤 下载python3.9.0,python官网:https://www.python.org,电脑已安装则转步骤2 下载所需模块的.whl文件,下载地址:https://www.lfd.uci.edu/~gohlke/pythonlibs 我下载的文件如下,一定注意所下载文件的版本号: win + R下输入cmd,打开终端,安装wheel并验证是否安装成功 pip install wheel #安装wheel wheel #验证wheel安装是否成功 cmd内切换路径至步骤 阅读详情

昨晚在Win10尝试安装scrapy的时候,遇到了很多问题。以前都是在linux下完成,倒是没觉得有这么多问题。

pip install -U scrapy pillow

1.Couldn’t find index page for ‘incremental’ (maybe misspelled?)

解决:pip install –upgrade setuptools

2.安装twisted时,报错如下:error: command ‘cl.exe’ failed: No such file or directory(twisted)

未解决:我查了很多资料,cl.exe is the Microsoft C/C++ compiler (included in MS Visual C++ / MS Visual Studio.)
我把C:\Program Files (x86)\Microsoft Visual Studio 14.0\VC\bin 和
C:\Program Files (x86)\Microsoft Visual Studio 14.0\Common7\IDE添加进PATH。

C:\Program Files (x86)\Microsoft Visual Studio 14.0\VC\lib;
C:\Program Files (x86)\Windows Kits\10\Lib\10.0.10150.0\ucrt\x86;
C:\Program Files (x86)\Windows Kits\8.1\Lib\winv6.3\um\x86添加到LIB

C:\Program Files (x86)\Microsoft Visual Studio 14.0\VC\include;
C:\Program Files (x86)\Windows Kits\10\Include\10.0.10150.0\ucrt添加到INCLUDE

好了,以上都是废话。又不成功。
接下来,我们说用PyCharm成功安装Scrapy。
1.打开PyCharm的Settings
这里写图片描述

2.在Settings中找到Project Interpreter,
这里写图片描述

3.点击Project Interpreter中的+号,
这里写图片描述

4.搜索scrapy,并安装
这里写图片描述

5.最后,安装成功

pip freeze

这里写图片描述

6.成功新建scrapy项目
这里写图片描述

python下setuptools的安装详解及No module named setuptools的解决方法 主要给大家介绍了关于python下setuptools的安装以及No module named setuptools问题的解决方法,文中介绍的非常详细,对大家具有一定的参考学习价值,需要的朋友们下面来一起看看吧。 立即下载

相关推荐

Unreal Engine鸿蒙移植实战:环境配置、构建流程与性能优化指南

游戏引擎移植是跨平台开发中的关键技术环节,其核心原理在于通过适配目标操作系统的底层接口和工具链,实现同一套代码在不同硬件和软件环境下的高效运行。这项技术的价值在于最大化代码复用率,降低多平台维护成本,并能让应用快速触达新兴生态系统的用户。在移动游戏和XR应用领域,随着鸿蒙HarmonyOS生态的快速发展,将成熟的商业引擎如Unreal Engine迁移至此平台,成为开发者探索新市场机会的重要路径。本文聚焦于Unreal Engine项目向鸿蒙系统的移植实践,详细解析了从环境搭建、源码适配到构建打包的全链路流

weixin_29011395的博客 410

解决pip 安装失败

用官方的get-pip.py安装 pip失败, 报类似 Could not find a version that satisfies the requirement 的错, 没有找到具体原因. 尝试用 easy_install 安装pip , 报错: Reading https://pypi.python.org/simple/pip/ Download error on http

kevin_darkelf的专栏 14万+

从标记基因到功能分析:手把手教你人工注释单细胞亚群的完整流程

本文详细介绍了人工注释单细胞亚群的完整流程,从标记基因筛选到功能分析验证,特别针对肿瘤微环境、发育轨迹等复杂场景提供解决方案。通过差异表达分析、多维数据整合和实验验证,帮助研究者准确识别细胞类型,提升单细胞转录组研究的生物学解读深度。

jenkins8butler的博客 244

no module named google.protobuf.internal

在安装protobuf时出现问题,protobuf 安装连接:http://www.cnblogs.com/dupuleng/articles/5013548.html执行这步,若出现Couldn't find index page for 'google-apputils' (maybe misspelled?),则缺少google-apputils文件包手动安装,过程中可能会出现缺少pytho...

A20120942的博客 691

3. ChaosBlade-Box平台安装

参考自:https://chaosblade.io/docs/about-chaosblade/box-introduce/通过ChaosBlade-Box可实现chaosblade等已托管工具自动化部署,按照社区的建立的混沌实验模型统一实验场景,根据主机、Kubernetes、应用来划分目标资源,通过目标管理器来控制,在实验创建页面,可以实现白屏化的目标资源选择。

lldhsds的专栏 2485

FPGA_AD9361实战

1.参考网站。

Pual_Georg的博客 748

linux安装redis-rdb-tools

安装pip wget https://pypi.python.org/packages/source/p/pip/pip-1.5.4.tar.gz tar -xzvf pip-1.5.4.tar.gz cd pip-1.5.4 python setup.py install 安装redis-rdb-tools [root@taifund pip-1.5.4]# pip install rdbto...

Seth`s blog 4408

VASP能带计算避坑指南:从CHGCAR读取失败到成功解决的全过程

本文深度解析VASP能带计算中常见的“CHGCAR读取失败”报错,并提供从静态自洽到非自洽计算的全流程避坑指南。核心解决方案包括使用CONTCAR替代POSCAR、调整SYMPREC参数以处理对称性判定问题,并推荐利用vaspkit工具自动化生成输入文件,确保计算流程稳健高效。

weixin_29245767的博客 771

pycharm导包错误处理办法

今天写了一个项目,从虚拟机里面到出到物理机里面重新验证的时候导入requirements.txt里面的包报错,然后搜索一大堆,然后升级一堆东西,没用.于是又从报错代码入手,下面是报错代码↓↓↓↓↓ Command “python setup.py egg_info” failed with error code 1 in C:\Users\xxhaa\AppData\Local\Temp\pip-...

qq_38327141的博客 3142

基于MATLAB的井筒多相流模拟

井筒多相流的模拟可以基于不同的数学模型和计算方法。其中,最常用的模型之一是多相流模型,它基于质量守恒、动量守恒和能量守恒等原理,描述了流体在井筒中的流动行为。对于井筒多相流的模拟和分析可以帮助我们理解和优化油气田开发过程中的流体行为,从而提高产量和效率。在本文中,我们将介绍如何使用MATLAB进行井筒多相流的模拟,并提供相应的源代码。需要注意的是,以上示例是一个简化的模拟,仅用于演示如何使用MATLAB进行井筒多相流模拟。实际应用中,我们需要考虑更多的物理过程和参数,并使用更复杂的数值方法和模型进行模拟。

AtdiHtml的博客 706

8.5华为OD机试真题 新系统 - 最长不连续子串 (Java/Py/C/C++/Js/Go)

8.5华为OD机试真题 新系统 - 最长不连续子串 (Java/Py/C/C++/Js/Go)

算法大师! 626

由于从依赖项下载软件包出现问题而导致的安装依赖项错误

在编写 Python 项目的setup.py文件时,我们希望它能够帮助我们安装项目所需的依赖项。然而,在运行test.egg经过一番排查,我们发现用于下载依赖项的 PyPI 链接(即 https://pypi.python.org/simple/)是有效的,并且能够访问到源代码。因此,问题不在于 PyPI 服务器本身,而是出在我们本地的网络或 Python 环境。

D0126_的博客 654

大数据平台符合信创(CDH国产化代替)详细方案(企业内部不外传方案)

信创旨在实现信息技术产业的自主可控,减少对外部技术的依赖,从而提升国家信息安全和经济发展的自主性。在此背景下,中国对信创提出了更高的要求,以期在激烈的市场竞争中占据有利地位。信创不仅关乎技术层面的创新,更涉及到产业链条的整合与优化。它要求从基础硬件、操作系统、数据库、中间件等各个层面实现国产替代,构建完整的信息技术生态体系。尤其是在做国企项目时,就有硬性要求使用符合信创(国产代替)。在信创背景下,符合要求的产品必须具备自主可控、安全可靠以及性能卓越等核心特点。

大模型大数据攻城狮的专栏 3510

anaconda 怎么安装xlrd_Win10下安装通过anaconda安装Scrapy问题汇总

C:\Users\aitub>pip listPackage Version---------------------------------- -------------------alabaster 0.7.12anaconda-client 1....

weixin_39540934的博客 790

efm32 入门.pdf

本PDF共计22页,介绍的是操作驱动API,下载与否自己斟酌。

迈瑞BS系列全自动生化分析仪LIS协议接口手册(内含HL7和ASTM)

迈瑞BS系列全自动生化分析仪LIS协议接口手册,内含HL7和ASTM)

win10下安装scrapy不成功的问题解决

一般地,直接通过 pip install scrapy 安装。但是会出现下列问题。 Command ""d:\program files\python\python.exe" -u -c "import setuptools, tokenize;__file__='C:\\Users\\ZHANGT~1\\AppData\\Local\\Temp\\pip-build-hpfttay

张天壮 3004

WINCC7.3破解文件

WINCC7.3硬件够破解文件,有需要的下载!WINCC7.3硬件够破解文件,有需要的下载!

win10环境下scrapy安装问题

可能遇到的情况缺 build tool,这个直接安装安装的提示去微软下载。另一种大多数遇到的情况都是:error: command 'C:\\Program Files (x86)\\Microsoft Visual Studio 14.0\\VC\\BIN\\x86_amd64\\cl.exe' failed with exit status 2这其实是安装twisted时的错误,解决办法时安装...

HiveMe_Hitech 279

lwip-2.0.3

lwip是瑞典计算机科学院(SICS)的Adam Dunkels 开发的一个小型开源的TCP/IP协议栈。实现的重点是在保持TCP协议主要功能的基础上减少对RAM 的占用。

scrapy安装问题及解决(win10 x64)

安装的话直接pip install scrapy就可以,下面说说可能出现的问题及解决 1、no module named win32api 安装pywin32:http://www.lfd.uci.edu/~gohlke/pythonlibs/#pywin32, 我是64位python2.7,所以下载 pywin32-220-cp27-none-win_amd64.whl 2、

守望者的博客 2086

Python安装Scrapy的问题记录(win10/Ubuntu)

win10环境下的安装 首先在命令窗口敲pip install Scrapy会有错误提示: error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual 这里需要安装Twisted,在http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 下载需要的

u013146766的博客 239

在win10下安装Scrapy遇上的问题和最终解决办法

之前用pip安装依赖库都没有什么大问题,直到在装openssl的时候。出现了这么个错误:build\temp.win-amd64-3.7\Release\_openssl.c(493): fatal error C1083: Cannot open include file: 'openssl/opensslv.h': No such file or directoryerror: command...

orange_xiang的博客 2376

python 安装scapy_python3 安装scrapy

我的系统 win10专业版 64位 python2/3Scrapy安装步骤如下:1、安装pywin32python3 -m pip install pypiwin32我已经安装完成这样就安装完成2、安装pyOpenSSL,下载地址为https://pypi.python.org/pypi/pyOpenSSL下载下面两个文件将压缩文件解压,找到setup.py,安装。命令行执行python3 set...

weixin_39597987的博客 428

Win 10 安装scrapy遇到的问题:Microsoft VIsual C++ 14.0 is required解决办法

在用pip命令安装scrapy时可能会遇到下面的情况: 由于scrapy需要依赖PyDispatcher、parser、service-identity、w3lib、lxml、cssselect、six、queuelib、Twisted等等等(不止这些) 所以安装scrapy时也会安装依赖包,问题就出在这个上面,一般情况下都是Twisted安装失败 所以只要解决安装Twist...

WINSLOW的博客 697

win10 python 3.7 安装scrapy 时解决 cl.exe' failed with exit status 2 的问题

win10 python 3.7 安装 scrapy时,当我pip install scrapy过程中发现Twisted报错。 于是我尝试 pip install Twisted单独安装Twisted, 依然是报错。 从网上找了一下资料,说要把Twisted的文件下载到本地然后再安装,但再次安装时还是出现报错。 找了一次资料后来发现原来是Twisted和高版本的python有兼容性问题,...

qq_32906783的博客 7639

PicoPro配合IDM一键下载Glitch素材:从嗅探到本地文件的完整链路

在数字内容创作与资源采集中,经常需要在浏览器与下载工具之间建立高效协作。下载管理工具负责将网络媒体资源稳定、快速地保存至本地,而资源嗅探工具则承担识别网页中真实媒体地址的关键任务。两者结合,配合故障艺术风格素材的演示场景,形成了一条从发现到归档的自动化下载链路。无论是处理流式分段的网页视频,还是应对大文件下载中断、多线程请求受限等常见问题,理解这类组合应用都能显著提升工作效率。通过合理配置外部下载器路径、调整连接线程,并借助命令行实现批量拉取,即可把繁琐的复制粘贴压缩为一次点击。本文围绕这一实用场景,系统拆

weixin_34248023的博客 545

python的scrapy框架的安装_win10系统如何安装scrapy框架

win10系统如何安装scrapy框架工具/原料win10系统python3.6scrapy方法/步骤1第一步:首先,我们先在电脑上安装好python3.6并且配置好环境变量,以可以直接在命令行界面输入python命令可以出现如图的界面为主。2第二步:我们在命令行界面直接输入“pip install scrapy”命令。3第三步:稍等片刻,命令行会开始安装scrapy。4第四步:如果出现报错,基本...

weixin_39623244的博客 213

scrapy-splash的安装和使用

这次记录的scrapy-splash的安装和使用基本上是两种情况:一是win10比较新的版本+docker for windows;二是win10家庭版,win7(理论上win8也是)+docker toolbox 首先是win10比较新的版本+docker for windows: 前面基本是一键安装,因为docker for windows没有给你选择的地方 接着开启docke...

agfo89705的博客 839

Scrapy安装(Linux 和 win10 )python3.6&2.7 全方位安装

Scrapy安装(Linux 和 win10 )python3.6&2.7 全方位安装欢迎使用一个爬虫萌新的悲惨遭遇回到官网 欢迎使用一个爬虫萌新的悲惨遭遇 笔者今天在学习《用python写网络爬虫》的第八章学习Scrapy流行的网络爬虫架构。 绝知此事要躬行嘛。所以立即打开电脑进行了安装! 调出命令窗口CMD输入(没装pip的自行搜索如何安装) pip install Scrapy ...

sinat_34285764的博客 403
上一篇: 浅析函数装饰器和闭包(二)
下一篇: Python模块函数导入的几种姿势(下)
arthuo
博客等级 码龄11年 72粉丝 21原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值