
python-scrapy
文章平均质量分 62
python-scrapy
aolixiaox
目前常用技术栈:c#-.net/java-spring + vue/react + uniapp + electron。
15年之前用powerbuilder做了10多年CS桌面应用。
展开
-
python scrapy 环境搭建
scrapy的安装算比较麻烦,如果实在怕麻烦就下载Anaconda,安装过程就简单很多,后面的内容也就不用看了。这里介绍的是windows环境+python3的安装过程。安装过程出的问题主要是依赖包的安装。一、C++ 14 的支持安装文件比较麻烦,有C币的话,优快云有很多链接。这里给一个百度云链接:二、Twisted 的支持scrapy 是在Twisted 框架上开发的,自然...原创 2019-07-10 14:35:47 · 226 阅读 · 0 评论 -
Python xpath 详解一(非网络文章复制粘贴)
之前有看到好多关于xpath用法的文章,大多都是复制粘贴,一些生硬的表格,生硬的例句,对初学者非常不友好。整理这篇文章,旨在帮助更多的初学者能快速上手。示例链接:http://db.auto.sohu.com/yiqiaudi/4414一、xpath 路径“选品牌” 下拉框,对应的代码片段,和路径关系如图:那么要提取下拉框选项,...原创 2019-07-22 17:00:23 · 762 阅读 · 0 评论 -
Python xpath 详解二
四、关于 nodename 的使用有看过其他xpath文章的,一定都见过这个表格,而且基本上都是复制的,都不管里面写的什么。这个说明不明确,还容易误导理解。1、nodename 这个不是关键字, //div/nodename并不是匹配div 后辈的所有节点。nodename 指的是支点名称,比如div 、ul、li、td…2、那么selector.xpath('div')也不是匹配di...原创 2019-07-22 21:02:08 · 241 阅读 · 1 评论