Plus Ultra !!!

1. HTTP简介 1.1 HTTP请求格式 1.2 HTTP请求方式 1.3 浏览器开发者工具使用 1.4 HTTP GET请求查看 1.5 HTTP POST请求查看 2. urllib和urllib2模块使用 2.1 模块介绍及两模块异同 3. Requests模块使用 3.1 Requests模块介绍 3.2 Requests模块常见API使用 3.3 设置请求头信息模拟浏...

1 HTML基础 1.1 HTML结构 1.2 HTML各标签结构 1.3 HTML样式 2.正则表达式 2.1 元字符 2.1.1 元字符之. ^ $ * + ? { } 2.1.2 元字符之字符集［］ 2.1.3 元字符之转义符 \ 2.1.4 元字符之分组() 2.1.4 元字符之｜ 2.1.5 正则表达式模式总结 2.2 re模块下的常用方法 爬虫案例 1 3 Beauti...

Scrapy框架 1. Scrapy整体架构 2. Scrapy运行流程 3. 安装 4. 基本使用 4.1 创建项目 4.2 编写爬虫 4.3 运行爬虫 5. HtmlXPathSelector 选择器 6. 递归访问爬取网页 7. 获取Cookies 8. Items格式化处理 Scrapy框架 Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用...

1 项目背景 2 Scrapy 爬取51job具体信息 3 数据清洗 3.1 导入csv 3.2 处理tags,提取其中有效信息 3.2.1 处理tags中数据数目不一致,规整数据信息 3.2.2 处理地区信息,提取其中省名 3.3 将处理好的tags信息与原数据合并并删除原tags列 3.4 处理薪资单位不一致问题,规整为 “/月” 3.5 将处理完的数据保存至csv ...