macOS下（anaconda环境）使用scrapy 时，openssl报错

管理conda环境与openssl版本
最新推荐文章于 2024-05-14 10:43:28 发布
原创 最新推荐文章于 2024-05-14 10:43:28 发布 · 441 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#macos #anaconda #openssl

本文介绍如何在使用conda创建环境时管理openssl版本，避免与mac系统自带版本冲突。通过设置环境变量指向conda环境，确保项目中使用的是正确的openssl版本。
部署运行你感兴趣的模型镜像

注意好版本即可

conda create环境时，会提示下载依赖库 openssl 默认1.1.1

mac 自带openssl版本 可以通过设置指向conda envs的环境变量

您可能感兴趣的与本文相关的镜像

Python3.8

Python3.8

Conda
Python

Python 是一种高级、解释型、通用的编程语言，以其简洁易读的语法而闻名，适用于广泛的应用，包括Web开发、数据分析、人工智能和自动化脚本

Scrapy学习笔记-Anaconda下安装
肥叔菌的博客
04-15 9101
安装 Scrapy 参考自Scrapy的官方手册：https://docs.scrapy.org/en/latest/intro/install.html Scrapy在CPython（默认Python实现）和PyPy（从PyPy 5.9开始）下的Python 3.5或更高版本上运行。 Anaconda下安装 如果您使用的是Anaconda或Miniconda，则可以从conda-forge渠道安...
Scrapy框架的安装
m0_58310590的博客
04-22 1313
虚拟环境允许您不与已安装的 Python 冲突 系统包（可能会破坏您的一些系统工具和脚本）， 并且仍然正常安装带有（没有等）的软件包。构建 Scrapy 的依赖项需要 C 编译器的存在，并且 开发标头。出现此异常的原因是您的系统或虚拟环境 具有您的 Twisted 版本不支持的 pyOpenSSL 版本。此方法是解决上述macOS问题的解决方法，但它是一个整体 管理依赖关系的良好做法，可以补充第一种方法。请注意，有时这可能需要解决某些 Scrapy 的编译问题 依赖项取决于您的操作系统，因此请务必查看。
scrapy安装所依赖的所有包python,openssl,twisted,w3lib等以及安装过程
11-10
此文件包含安装scrapy所依赖的所有包，以及详细的安装过程。我已经被网上blog里面安装scrapy搞疯了，各种说的模糊。
Anaconda报错：Conda SSL Error: OpenSSL appears to be unavailable on this machine. OpenSSL is required t
爱在深秋
11-17 1万+
Anaconda报错：Conda SSL Error: OpenSSL appears to be unavailable on this machine. OpenSSL is required to download and install packages
【Anaconda】关于新版本anaconda3中ssl模块缺失的问题
rippersudo的博客
11-08 5641
最近需要用一个软件，只提供了python包，所以用conda或者pip都可以很容易的下载 我的电脑上装的是原生python2、python3和anaconda3，很少用原生，一直在用anaconda托管。结果昨天在使用anaconda3安装该软件的的时候发现报错： ——pip is configured with locations that require TLS/SSL, however ...
m1 mac 安装和使用 homebrew 解决 scrapy 运行时OpenSSL的问题
木尧大兄弟
04-03 2750
背景 最近需要在 m1 mac 上用 scrapy 爬点数据，用 miniconda 装了个虚拟环境后，运行 scrapy shell 测试 https 请求时，报错如下： builtins.MemoryError: Cannot allocate write+execute memory for ffi.callback(). You might be running on a system that prevents this. For more information, see https://cf
ubuntu下python3安装scrapy，OpenSSL
weixin_41010318的博客
09-29 548
环境：ubuntu 16.04  ,  python3.5.1+ 安装顺序如下： sudo apt-get install build-essential sudo apt-get install python3-dev sudo apt-get install libxml2-de; sudo apt-get install libxslt1-dev sudo apt-get inst...
python3环境下安装Scrapy爬虫框架
qq_41661973的博客
02-23 494
Scrapy安装介绍 Scrapy的安装有多种方式，它支持Python2.7版本及以上或Python3.3版本及以上。下面说明Python3环境下的安装过程。 Scrapy依赖的库比较多，至少需要依赖库有Twisted 14.0，lxml 3.4，pyOpenSSL 0.14。而在不同平台环境又各不相同，所以在安装之前最好确保把一些基本库安装好，尤其是Windows。 腾讯云有Windows、Li...
(scrapy_env) C:\Users\Lenovo\nepu_spider>scrapy crawl nepu -o output.json --loglevel=INFO 2025-07-03 18:26:04 [scrapy.utils.log] INFO: Scrapy 2.8.0 started (bot: nepu_spider) 2025-07-03 18:26:04 [scrapy.utils.log] INFO: Versions: lxml 4.9.3.0, libxml2 2.10.4, cssselect 1.1.0, parsel 1.6.0, w3lib 1.21.0, Twisted 22.10.0, Python 3.11.5 | packaged by Anaconda, Inc. | (main, Sep 11 2023, 13:26:23) [MSC v.1916 64 bit (AMD64)], pyOpenSSL 23.2.0 (OpenSSL 3.0.10 1 Aug 2023), cryptography 41.0.3, Platform Windows-10-10.0.26100-SP0 2025-07-03 18:26:04 [scrapy.crawler] INFO: Overridden settings: {'BOT_NAME': 'nepu_spider', 'FEED_EXPORT_ENCODING': 'utf-8', 'LOG_FILE': 'nepu_crawler.log', 'LOG_LEVEL': 'INFO', 'NEWSPIDER_MODULE': 'nepu_spider.spiders', 'REQUEST_FINGERPRINTER_IMPLEMENTATION': '2.7', 'ROBOTSTXT_OBEY': True, 'SPIDER_MODULES': ['nepu_spider.spiders'], 'TWISTED_REACTOR': 'twisted.internet.asyncioreactor.AsyncioSelectorReactor'} 啥意思
07-04
输出的日志是 Scrapy 启动时的初始化信息，它告诉你当前爬虫环境、配置和依赖库版本等关键内容。 --- ## 日志逐行解释如下： ### 1. `Scrapy 2.8.0 started (bot: nepu_spider)` - 表示 Scrapy 框架已经启动。 - ...
Exception: Traceback (most recent call last): File "D:\zwx\Anaconda3\lib\site-packages\pip\_internal\cli\base_command.py", line 179, in main status = self.run(options, args) File "D:\zwx\Anaconda3\lib\site-packages\pip\_internal\commands\install.py", line 315, in run resolver.resolve(requirement_set) File "D:\zwx\Anaconda3\lib\site-packages\pip\_internal\resolve.py", line 131, in resolve self._resolve_one(requirement_set, req) File "D:\zwx\Anaconda3\lib\site-packages\pip\_internal\resolve.py", line 294, in _resolve_one abstract_dist = self._get_abstract_dist_for(req_to_install) File "D:\zwx\Anaconda3\lib\site-packages\pip\_internal\resolve.py", line 242, in _get_abstract_dist_for self.require_hashes File "D:\zwx\Anaconda3\lib\site-packages\pip\_internal\operations\prepare.py", line 349, in prepare_linked_requirement abstract_dist.prep_for_dist(finder, self.build_isolation) File "D:\zwx\Anaconda3\lib\site-packages\pip\_internal\operations\prepare.py", line 109, in prep_for_dist self.req.load_pyproject_toml() File "D:\zwx\Anaconda3\lib\site-packages\pip\_internal\req\req_install.py", line 489, in load_pyproject_toml str(self) File "D:\zwx\Anaconda3\lib\site-packages\pip\_internal\pyproject.py", line 66, in load_pyproject_toml pp_toml = pytoml.load(f) File "D:\zwx\Anaconda3\lib\site-packages\pip\_vendor\pytoml\parser.py", line 11, in load return loads(fin.read(), translate=translate, object_pairs_hook=object_pairs_hook, filename=getattr(fin, 'name', repr(fin))) File "D:\zwx\Anaconda3\lib\site-packages\pip\_vendor\pytoml\parser.py", line 24, in loads ast = _p_toml(src, object_pairs_hook=object_pairs_hook) File "D:\zwx\Anaconda3\lib\site-packages\pip\_vendor\pytoml\parser.py", line 340, in _p_toml s.expect_eof() File "D:\zwx\Anaconda3\lib\site-packages\pip\_vendor\pytoml\parser.py", line 125, in expect_eof return self._expect(self.consume_eof()) File "D:\zwx\Anaconda3\lib\site-packages\pip\_vendor\pytoml\parser.py", line 165, in _expect raise TomlError('msg', self._pos[0], self._pos[1], self._filename) pip._vendor.pytoml.core.TomlError: C:\Users\66446\AppData\Local\Temp\pip-install-o8to0ril\cryptography\pyproject.toml(180, 1): msg
最新发布
09-23
5. **使用conda**：如果使用的是Anaconda，可以尝试用conda安装，因为conda提供的预编译包通常可以避免编译问题： ```bash conda install cryptography ``` 6. **临时文件路径问题**：错误信息中提到了临时文件...
scrapy之openssl版本报错问题
没有人看的博客
01-08 1355
创建scrapy项目：scrapy startproject project_name，终端报错如下图 可以看见报的是OpenSSL没有version这个属性。之前我在使用scrapy的时候OpenSSL也疯狂报错（在跑scrapy时报错，开发还是别用win10了- -） 本着哪里错了点哪里的原则，点到version.py文件里去看一看，报错代码如下： 大致看了一看，这是一个获得openssl版本...
Scrapy BUG AttributeError: module ‘OpenSSL.SSL‘ has no attribute ‘SSLv3_METHOD‘
m0_69938575的博客
04-26 912
我们这会子看到的pyOpenSSL 版本是23.0.0版本的，我就先卸载这个版本，下载22.0.0版本的。当我们运行 scrapy crawl spider时报出bug时，我们这样去解决，首先先看。输入命令 scrapy version --verbose。下载22.0.0版本， 然后我们在运行程序。这就成功解决scrapy框架的bug问题。
scrapy使用代理报错keyerror: proxy_?一文搞懂爬虫框架scrapy,从此入坑到入土在到化蝶成仙...
weixin_40001025的博客
12-08 176
​之前我有和大家介绍过scrapy的安装方法，今天我们从建立项目到scrapy 爬虫，爬取极品笑话大全，从头到尾的来一遍。一，Scrapy框架的安装：1.首先是简单的pip安装，pip install scrapy 即可安装，2.如果是在windous 下下定记得安装 pypiwin32,要不打开会报错，3.安装pypiwin32,pip install pypiwin32,二 ，创建项目和爬虫：...
Scrapy安装步骤及错误汇总：scrapy OpenSSL error: command ‘gcc’ failed with exit status 1...
dalaoshu321的博客
06-11 164
原文地址：http://blog.csdn.net/iloveyin/article/details/13623647 Scrapy安装步骤及错误汇总：scrapy OpenSSL error: command ‘gcc’ failed with exit status 1 分类： Python 2013-10-30 11:10 609人阅读 评论(0) 收藏 举报 安装easy_...
Anaconda SSL错误：OpenSSL不可用问题的完整解决方案
qq_44103359的博客
05-14 3565
在Anaconda环境中遇到“CondaSSLError: OpenSSL appears to be unavailable on this machine”的错误通常意味着你的系统上缺少OpenSSL库，或者Anaconda环境没有正确配置来识别这个库。这个问题会阻止你使用conda命令安装、更新或管理包。下面，我将详细解释这个问题的原因，并提供解决方法。
AttributeError: module ‘lib‘ has no attribute ‘OpenSSL_add_all_algorithms‘
面向未来的历史
01-14 5237
环境： Mac M1， python3.8。
scrapy中ImagePipeline报错
qq_50693500的博客
11-23 515
twisted.web._newclient.ResponseNeverReceived: []
Can‘t connect to HTTPS URL because the SSL module is not available - 关于anaconda中的SSL模块错误
热门推荐
Sky_Tree_Delivery的博客
10-14 4万+
问题描述 起因是在使用requests包访问https请求时，出现了SSLError，提示Caused by SSLError(“Can’t connect to HTTPS URL because the SSL module is not available.” 根据一些博客设置verify=False，依然无效。 在尝试通过pip指定安装缺少的包时，也出现了类似的提示。 通过pip install 命令安装包时，出现了 Retrying (Retry(total=4, connect=None,
Windows下解决Python3.6安装Scrapy报错方案
由于在Windows环境下，Python的pip安装器在安装某些包时，例如Scrapy，可能会因为没有预装编译器而报错。这时候用户需要手动下载适合其Python版本和操作系统的预编译包。在这个例子中，用户应该下载与Windows平台和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值