Python 3.5.1安装lxml

最新推荐文章于 2023-08-21 20:54:13 发布
原创 最新推荐文章于 2023-08-21 20:54:13 发布 · 4.9k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

Python内部自带了很多的xml解析库，平时用起来也没什么问题，但遇到中文就over了，大名鼎鼎的lxml就不说了，下面来说说安装过程，以及这个过程中猜到的N个坑


1. 部署环境

系统：SLES 10

Python：python 3.5.1

lxml：lxml 3.6.0

libxml2：libxml2-2.9.0

libxslt：libxslt-1.1.28


2. 部署顺序

（1）装系统，这句纯属扯淡

（2）编译python，直接./configure --prefix=/usr/local/python3.5

（3）编译lxml 3.6，最开始遇到的提示是没有安装libxml2，按照正常逻辑，下载libxml2，然后编译安装，./configure --with-python=/usr/local/python3.5/bin/python3.5


各种大坑开始出现

坑1：relocation R_X86_64_32S against `_PyObject_NextNotImplemented' can not be used when making a shared object; recompile with -fPIC

原因：最开始下载的是libxml2.9.3版本，无论怎么编译都是这个报错，在网上找了N个方法，甚至重新编译了python，结果还是不行，后来想想，换个其他版本的吧，2.9是个大版本，就换这个了，结果正常，尼玛，官网稳定版不兼容

（4）编译libxslt，一切正常

（5）编译lx

最低0.47元/天 解锁文章
python3.5项目升级3.8问题汇总
不写代码的博客
10-15 2136
python3.5项目升级3.8问题汇总问题1：uwsgi问题1解决方案问题2：celery问题2解决方案 问题1：uwsgi 虚拟环境创建完成，但是在pip安装的时候遇到了第一个问题，uwsgi安装报错。Looking in indexes: http://mirrors.aliyun.com/pypi/simple/ Collecting uWSGI Using cached http://mirrors.aliyun.com/pypi/packages/24/fd/93851e4a0767191
Python Web技术开发软件安装
啃饼小白的修炼之路
10-05 565
关于博主 努力与运动兼备～~~有任何问题可以加我好友或者关注微信公众号，欢迎交流，我们一起进步！ 微信公众号: 啃饼思录 QQ: 2810706745（啃饼小白） 今天，博主正好有空，看到网上那么多求助Python Web技术开发软件安装的帖子...
python_libxml2_libxslt源代码和详细安装方法
06-14
python_libxml2_libxslt源代码和详细安装方法
python3.5安装lxml库
酱油拌面
07-25 1万+
装这个库这是蛋疼。。。 先是用pip install lxml 提示出错，死心不改，改用easy_install lxml，还是出错，而且还是一样的error 然后百度，谷歌，终于找到了对策。首先在cmd界面使用以下指令： pip install wheel，其次打开http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml去下载lxml的Wheel文件，进
window系统下 python3.5安装lxml-3.5.0 方法
weixin_33701251的博客
02-19 261
2019独角兽企业重金招聘Python工程师标准>>> ...
Python官网下载python3.5.0的执行程序无法运行
LiQingzhu~的博客
05-31 1090
- ->选中文件,右键 - ->属性 - ->解除锁定 - ->确定然后运行安装
[Ubuntu] 解决 pip 安装 lxml 出现 x86_64-linux-gnu-gcc 异常
weixin_34244102的博客
07-08 150
安装 pip ： $ wget https://bootstrap.pypa.io/get-pip.py ... $ sudo python get-pip.py install   使用 pip 安装/升级 lxml（升至 3.3.5） 时出现以下报错： "error: command 'x86_64-linux-gnu-gcc' failed with exit s...
Python网络爬虫基本库
Java/Python大数据随笔
08-21 2919
网络爬虫（Web Crawler）是一种自动化程序，用于从互联网上采集信息。它通过自动访问网页并提取所需的数据，实现对大量网页的快速检索和数据抓取网络爬虫通常使用HTTP协议来访问网页，并通过解析HTML、XML等网页内容来提取数据。爬虫可以从一个起始点（如某个特定网页）开始，然后根据链接关系自动地遍历和抓取其他相关网页。
python网络爬虫从入门到精通吕云翔pdf_Python 网络爬虫从入门到精通
weixin_39591916的博客
12-02 2562
第1章 Python与网络爬虫11.1 Python语言11.1.1 什么是Python11.1.2 Python的应用现状21.2 Python的安装与开发环境配置31.2.1 在Windows上安装31.2.2 在Ubuntu和Mac OS上安装41.2.3 PyCharm的使用51.2.4 Jupyter Notebook91.3 Python基本语法121.3.1 H...
php mysql 安装错误_apache + php + mysql 安装出错
weixin_42119989的博客
01-28 352
今天在 linux 14.04 上搭建 LAPM 环境，安装完 Apache2 之后，再去安装 PHP5，会出现如下错误：root@ubuntu:/home/adu# apt-get install php5 libapache2-mod-php5Reading package lists... Done......apache2_invoke: Enable module php5Action ...
cython_bbox.cpython-35m-x86_64-linux-gnu.so
11-12
Faster-RCNN在linux tensorflow python3.5下运行时需要的make生成文件
Python and XML
08-23
Python是操控XML最理想的语言，本书为您掌握这两种提供了坚实的基础。
Redhat6.5安装docker出现 “version Base not defined in file libdevmapper.so.1.02 with link time reference”
baidu_16950787的博客
04-18 2118
注：转载请注明出处 https://blog.csdn.net/baidu_16950787/article/details/79992038在Redhat6.5中安装docker时启动报错查看日志文件说要更新lib-mapper* 提供两种办法一个是更新yum源，一个是离线下载对应rpm包进行安装。方法一尝试使用yum update -y device-mapper-libs却发现不能拿起作用。...
Linux如何安装并配置libxml2库？解决“libxml2 not found“问题
热门推荐
Mintimate的优快云博客
09-26 3万+
这里写目录标题libxml2库方法比较Opt1:包管理器安装Debian/UbuntuCentOSOpt2:编译安装1. 下载源码2. 编译安装3. 环境变量卸载libxml2 libxml2库 libxml是一个用来解析XML文档的函数库。 它用C语言写成，并且能为多种语言所调用，例如：C语言，C++、XSH、C#,、Python、Kylix/Delphi、Ruby和PHP等。 它最初是为GNOME开发的项目，但现在可以用在各种各样的方面。libXML代码可移植性非常好，因为它基于标准的ANSI C库，并
python3.5 lxml用法
u011546871的专栏
07-25 5000
问题1：有一个XML文件，如何解析 问题2：解析后，如果查找、定位某个标签 问题3：定位后如何操作标签，比如访问属性、文本内容等 本文就是按这三个问题组织的，文本中代码都在Python 3.5中运行通过。开始之前，首先是导入模块，该库常用的XML处理功能都在lxml.etree中，可用下面的语句导入： from lxml import etree El
not defined in file libstdc++.so.6 withlink time reference
kunkliu的博客
01-25 2562
转载地址：http://blog.sina.com.cn/s/blog_bd6f4c120101mfyw.html 上一篇以及成功搭建了环境：http://blog.sina.com.cn/s/blog_bd6f4c120101mdm8.html 现在准备把自己写的界面程序移植到开发板运行. 利用qtcreator编写界面程序,这简单描述一下，参照上面文章： cd qt-4.6.3-x
version GLIBCXX_3.4.21 not defined in file libstdc++.so.6 with link time reference错误解决方案
Amazingren的博客
08-01 8750
'ss-qt5: relocation error: /tmp/.mount_ShadowYPmICx/usr/lib/libbotan-2.so.5: symbol _ZNSt7__cxx1112basic_stringIcSt11char_traitsIcESaIcEED1Ev, version GLIBCXX_3.4.21 not defined in file libstdc++.so.6...
Python操作XML文件
m0_72658126的博客
08-06 606
优快云21天挑战赛第5-6天
Python 标准库 xml的简单使用
weixin_42118352的博客
04-19 498
对于简单的XML解析处理, 可以使用标准库xml, 相对于第三方库lxmlxml无需额外安装, 但xml是用 Python 实现的, 性能不如lxmlXML 的解析功能主要由模块完成, 其中包含两个类,用于表示整个 XML 文档, 而Element表示文档中的一个节点示例数据, 命名为 book.xml
2025-07-07 15:39:05 [scrapy.utils.log] INFO: Scrapy 2.13.3 started (bot: scrapybot) 2025-07-07 15:39:05 [scrapy.utils.log] INFO: Versions: {&#39;lxml&#39;: &#39;6.0.0&#39;, &#39;libxml2&#39;: &#39;2.11.9&#39;, &#39;cssselect&#39;: &#39;1.3.0&#39;, &#39;parsel&#39;: &#39;1.10.0&#39;, &#39;w3lib&#39;: &#39;2.3.1&#39;, &#39;Twisted&#39;: &#39;25.5.0&#39;, &#39;Python&#39;: &#39;3.11.5 (tags/v3.11.5:cce6ba9, Aug 24 2023, 14:38:34) [MSC v.1936 &#39; &#39;64 bit (AMD64)]&#39;, &#39;pyOpenSSL&#39;: &#39;25.1.0 (OpenSSL 3.5.1 1 Jul 2025)&#39;, &#39;cryptography&#39;: &#39;45.0.5&#39;, &#39;Platform&#39;: &#39;Windows-10-10.0.22631-SP0&#39;} Traceback (most recent call last): File "D:\python\python3.11.5\Lib\site-packages\scrapy\spiderloader.py", line 106, in load return self._spiders[spider_name] ~~~~~~~~~~~~~^^^^^^^^^^^^^ KeyError: &#39;faq_spider&#39; During handling of the above exception, another exception occurred: Traceback (most recent call last): File "D:\code\nepu_spider\run_all_spiders.py", line 15, in <module> process.crawl(name) File "D:\python\python3.11.5\Lib\site-packages\scrapy\crawler.py", line 338, in crawl crawler = self.create_crawler(crawler_or_spidercls) ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ File "D:\python\python3.11.5\Lib\site-packages\scrapy\crawler.py", line 374, in create_crawler return self._create_crawler(crawler_or_spidercls) ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ File "D:\python\python3.11.5\Lib\site-packages\scrapy\crawler.py", line 458, in _create_crawler spidercls = self.spider_loader.load(spidercls) ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ File "D:\python\python3.11.5\Lib\site-packages\scrapy\spiderloader.py", line 108, in load raise KeyError(f"Spider not found: {spider_name}") KeyError: &#39;Spider not found: faq_spider&#39;
最新发布
07-08
你遇到的错误是： ``` KeyError: &#39;Spider not found: faq_spider&#39; ``` 这意味着 Scrapy 无法找到名为 `faq_spider` 的爬虫类。这是由于你在 `run_all_spiders.py` 中尝试运行的爬虫名称与实际定义的爬虫类中的 `name` 属性不匹配。 --- ## ✅ 原因分析 在你的 `spiders/faq_spider.py` 文件中，你定义了如下内容： ```python class FaqSpider(scrapy.Spider): name = &#39;faq&#39; # 这个 name 是你在命令行或脚本中调用时使用的名称 ``` 但你在执行脚本时传入的是 `&#39;faq_spider&#39;`，Scrapy 就会去查找是否有爬虫设置了 `name = &#39;faq_spider&#39;`，结果找不到，就报错了。 --- ## ✅ 解决方案 ### ✅ 方法一：修改 `run_all_spiders.py` 中的爬虫名称为实际定义的 `name` 将： ```python spider_names = [&#39;faq_spider&#39;, &#39;notice_spider&#39;, &#39;rule_spider&#39;, &#39;department_spider&#39;] ``` 改为： ```python spider_names = [&#39;faq&#39;, &#39;notice&#39;, &#39;rule&#39;, &#39;department&#39;] ``` 因为你的每个 Spider 类中定义的 `name` 分别是 `&#39;faq&#39;`, `&#39;notice&#39;`, `&#39;rule&#39;`, `&#39;department&#39;`。 --- ### ✅ 方法二：修改各个 Spider 的 `name` 字段为你想调用的名字（如 `faq_spider`） 例如，在 `faq_spider.py` 中： ```python class FaqSpider(scrapy.Spider): name = &#39;faq_spider&#39; # 改成你想通过 run_all_spiders.py 调用的名称 ``` 然后其他爬虫也类似地修改其 `name` 属性即可。 --- ## ✅ 修改后的完整 `run_all_spiders.py` 确保该文件位于项目根目录（与 `scrapy.cfg` 同级）： ```python from scrapy.crawler import CrawlerProcess from scrapy.utils.project import get_project_settings # 获取 Scrapy 项目的设置 settings = get_project_settings() # 创建 CrawlerProcess 实例 process = CrawlerProcess(settings) # 添加需要运行的爬虫名称（必须与 spider.name 完全一致） spider_names = [&#39;faq&#39;, &#39;notice&#39;, &#39;rule&#39;, &#39;department&#39;] for name in spider_names: process.crawl(name) # 启动爬虫 if __name__ == &#39;__main__&#39;: process.start() ``` --- ## ✅ 检查点 1. 确保每个爬虫类中定义的 `name` 与你传入的名称完全一致； 2. 确保 `SPIDER_MODULES` 设置正确（默认自动识别）； 3. 确保 `scrapy.cfg` 存在，并且 `default` 指向正确的项目模块； 4. 确保没有拼写错误（如 `FaqSpider` 是否被正确定义、导入）； --- ##
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值