ubuntu14安装scrapy各种报错

最新推荐文章于 2024-06-16 20:33:58 发布
原创 最新推荐文章于 2024-06-16 20:33:58 发布 · 515 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#python

博客主要记录了Python相关操作，首先需安装python - dev、libmysqlclient - dev和setuptools，同时列举了一系列错误和模块缺失问题，如‘x86_64 - linux - gnu - gcc’失败、‘openssl’‘cryptography’等模块缺失。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

一、先安装 python-dev libmysqlclient-dev setuptools

apt-get install python-dev
apt-get install libmysqlclient-dev
pip3 install scrapy

二、Error: command ‘x86_64-linux-gnu-gcc’ failed with exit status 1

apt-get build-dep python3-lxml  
pip3 install lxml --upgrade

三、No module named ‘openssl’

pip3 install pyOpenSSL

四、No module named ‘cryptography’


安装四个模块
apt-get install build-essential libssl-dev  libffi-dev python-dev
再执行
pip3 install cryptography

五、No module named ‘MySQLdb’

python3不支持MySQLdb，用mysqlclient替代
pip3 install mysqlclient

六、UserWarning: You do not have a working installation of the service_identity module: ‘No module named ‘service_identity”.

pip3 install service_identity

七、No module named ‘queuelib’

pip3 install queuelib

Ubuntu 18.04安装Scrapy步骤及各种报错总结
the best messi的博客
08-07 1096
文章目录前言Scrapy安装步骤报错总结1.raise ReadTimeoutError(self._pool, None, 'Read timed out.')2.Could not find a version that satisfies the requirement setuptools后记 前言 难道就我一个人总是安装一个库要整一天的嘛？还是学习崔老师的《python网络爬虫开发实战》这本书，今天安装的是目前非常流行的爬虫框架：Scrapy。还是一如既往的按照老师的安排运行各种命令，前面都还好，
如何在Ubuntu上安装scrapy与mongodb
菠萝盖饭的博客
04-22 376
前言：这个星期最初本想在windows上搭建scrapy环境，但是windows实在是太不友好了，mongodb始终安装不好，再考虑到之前有些库在windows上不适用，于是痛定思痛，决定重新搭建一个虚拟机环境。 一、虚拟机 平台：virtualbox 版本：Ubuntu 16.04 二、安装python3 最简单的方法 命令行输入： sudo apt install python3 不行再尝试...
Ubuntu安装scrapy
08-04
安装scrpay 安装scrpay 安装scrpay安装scrpay安装scrpay安装scrpay
ubuntu安装scrapy报错
u014775723的博客
12-29 425
pip install scrapy时报错：Could not find a version that satisfies the requirement Twisted>=13.1.0 (from Scrapy) (from versions: )  No matching distribution found for Twisted>=13.1.0 (from Scrapy)  ...
Ubuntu 安装scrapy 报错时的解决方案
wto882dim的博客
11-27 292
我的阿里云安装scrapy时报这个错误:   解决方法： 在 Linux 终端输入以下命令，即可 export LC_ALL=C
ubuntu 安装scrapy错误解决方法
weixin_40208575的博客
08-12 1048
在终端输入 sudo pip install scrapy #或者 pip install scrapy 都会报错 看了很多别的博客的方法都没能成功解决 最后想直接输入scrapy看会报什么错误 然后成功解决问题 希望这个方法能解决你的问题...
ubuntu安装scrapy后报错
my383617487的专栏
09-13 569
安装scrapy的方法： http://jingyan.baidu.com/article/14bd256e748346bb6d2612be.html http://jingyan.baidu.com/article/f3ad7d0f129c7809c2345b56.html 其中，画重点： sudo apt-get install python-dev sudo apt-get i
Ubuntu20.04 使用scrapy-splash爬取动态网页
最新发布
root@dream
06-16 504
6.因为splash其实是一个scrapy框架的插件scrapy-splah要用的服务，因此在我们学习插件的用法之前，我们有必要学习一下简单的scrapy框架的知识了。按照官方文档：https://splash.readthedocs.io/en/stable/install.html。若要重新用docker在8050端口启动进程，请重启docker服务，来更新状态。因为用到是8050端口，可以使用如下程序，查到进程。在这里，我指定了pip3，怕弄混淆。最后，尝试成功，解决了依赖。具体的学习见一篇博文。
解决Python3安装Scrapy报错的两大方法
然而，在安装Scrapy时，用户可能会遇到各种错误。以下将详细介绍安装Scrapy时遇到报错的解决方法。 ### 方法一：下载对应文件后pip安装 当用户尝试使用pip直接安装Scrapy时可能会出现错误，这时一个常见的解决方案...
Ubuntu下Scrapy的安装
KDF5000的专栏
08-23 1361
最近在学习爬虫，早就听说Python写爬虫极爽（貌似pythoner说python都爽，不过也确实，python的类库非常丰富，不用重复造轮子），还有一个强大的框架Scrapy，于是决定尝试一下。要想使用Scrapy第一件事，当然是安装Scrapy，尝试了Windows和Ubuntu的安装，本文先讲一下 Ubuntu的安装，比Windows的安装简单太多了。。。抽时间也会详细介绍一下怎么在Windo
ubuntu安装Scrapy
Yelbosh的专栏
05-22 9952
Scrapy是Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。 官网网站http://www.scrapy.org/ 1、安装如下软件 sudo apt-get install build-essential; sudo apt-get install py
Ubuntu 14.04 安装 scrapy
weixin_30872337的博客
05-24 163
按照官方文档的说明，安装scrapy 需要以下程序或者库： Python2.7 lxml. Most Linux distributions ships prepackaged versions of lxml. Otherwise refer tohttp://lxml.de/installation.html OpenSSL. This comes preinstalle...
Ubuntu安装scrapy奇葩出错
学海乌鸦的专栏
10-12 778
出错信息 Command “/usr/bin/python -u -c “import setuptools, tokenize;file=’/tmp/pip-build-VxP_qQ/cryptography/setup.py’;exec(compile(getattr(tokenize, ‘open’, open)(file).read().replace(‘\r\n’, ‘\n’), fil
ubuntu14.04安装scrapy报错“error in cryptography ...”
首席码农
01-22 1407
害我折腾了半天，##ck! 问题出在cryptography模块的安装上，我们来看错误信息 Running setup.py (path:/tmp/pip_build_root/cryptography/setup.py) egg_info for package cryptography error in cryptography setup command: Invalid e
ubuntu安装SCrapy
猴子年华的专栏
11-23 323
标签： 依次安装 sudo apt-get install build-essential; sudo apt-get install python-dev; sudo apt-get install libxml2-dev; sudo apt-get install libxslt1-dev; sudo apt-get install python-setuptools; 然后安装Scr...
Ubuntu安装Scrapy
牛犊不怕虎的博客
09-20 940
首先需要安装依赖包如下：sudo apt-get install python3-dev build-essential python3-piplibxml2-devlibxslt1-devzlib1g-dev libffi-dev libssl-dev 安装scrapy pip install scrapy ...
ubuntu下安装scrapy
dldx_062的专栏
06-15 1987
今天一下午都在安装scrapy，虽然网上也有很多的安装方法，但是安装完之后还是会出现一些问题，大概说一下 主要参考的是下面的这边文章，他已经说的很详细了，我在这先给他贴出来 参考连接：http://open.189.cn/discuz/forum.php?mod=viewthread&tid=86 摘要: 原创作者:博客园sharpstill,转载请注明Scrapy是一款非常
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值