
python爬虫
文章平均质量分 54
Mr-LH
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
爬虫库之selenium
python selenium Chrome Webdriver兼容在实战项目破解极验证码时,遇见selenium.common.exceptions.ElementNotVisibleException: Message: u'element not visible这样一条错误。解决:该异常Chrome的运行速度以及WebDriverWait的可靠性有一定关系,所以可以适当time.sleep...原创 2018-06-13 21:55:49 · 157 阅读 · 0 评论 -
Mongodb环境安装
1.在win10安装Mongodb时,要在最后一步安装界面左下角, install mongodb compass 状态改成未选中 才能安装成功。原创 2018-06-07 20:57:36 · 185 阅读 · 0 评论 -
anaconda
Anaconda 是一个用于科学计算的 Python 发行版,支持 Linux, Mac, Windows, 包含了众多流行的科学计算、数据分析的 Python 包。Anaconda 安装包可以到清华大学开源软件镜像站:https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ 下载。第一个选项,添加到环境变量第二个,关联python可以下载有关库...原创 2018-06-08 09:13:44 · 241 阅读 · 0 评论 -
redis环境安装
安装路径: http://www.runoob.com/redis/redis-install.html 直接安装安装redisDesktop:https://github.com/uglide/RedisDesktopManager/releases找到0.8.8 安装。原创 2018-06-08 09:46:15 · 151 阅读 · 0 评论 -
爬虫常用库安装
urllib re库 一般自带,如图测试是否正常requests命令行: pip install requests安装完成测试是否正常,如图selenium命令行: pip install selenium安装完成缺少chromeDriverChromeDriver官网得翻墙,镜像链接 : http://npm.taobao.org/mirrors/chromedriver/chromeDriv...原创 2018-06-08 10:10:26 · 3172 阅读 · 0 评论 -
爬虫基本原理
什么是爬虫: 请求网站并提取数据的自动化程序原创 2018-06-08 15:40:34 · 351 阅读 · 0 评论 -
爬虫库之urllib
官方文档:https://docs.python.org/3/library/urllib.htmlutllib是python内置的HTTP请求库包含一下模块:urllib.request 请求模块urllib.error 异常处理模块urllib.parse url解析模块urllib.robotparser robots.txt解析模块相比与python的变化:python2import ur...原创 2018-06-15 21:30:40 · 172 阅读 · 0 评论