
爬虫
Mr.Zheng~_
想要的就去争取,等是等不到的~_
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
scrapy的使用
scrapy 官方文档: https://docs.scrapy.org/en/latest/ 首先你要安装 scrapy 安装方法很简单,打开cmd命令行: pip install --upgrade pip #先升级pip pip install scrapy #下载scrapy 解决 Scrapy 安装错误:Microsoft Visual C++ 14....原创 2019-01-05 14:32:41 · 691 阅读 · 0 评论 -
python爬虫 scrapy 爬取腾讯招聘
第一步创建项目: 移步 https://blog.youkuaiyun.com/mgmgzm/article/details/85849918 查看项目创建方法 第二步需求分析: 1) 获取腾讯招聘搜索结果页 2) 获取每一条结果对应的详情信息 3) 二次解析页面 第三步废话少说上代码: setting文件配置: # 打开请求头 USER_AGENT = 'day9 (+http://w...原创 2019-01-05 15:03:03 · 1425 阅读 · 0 评论 -
python爬虫 selenium、PyQuery 爬取京东商城
首先来说一说selenium,这是一个浏览器自动化测试框架。嗯。。。。就介绍这么多,要详细了解的话自己去看文档 诺~网址:https://www.seleniumhq.org/docs/ 第一步需求分析: 1)自动搜索商品 2)获取搜索结果的数据 来个分割线 第二步上代码啊: 功能编写模块 from selenium import webdriver from seleniu...原创 2019-01-15 09:39:16 · 964 阅读 · 0 评论