
python
文章平均质量分 84
纯粹且笃定
路向阳_
实战安全
展开
-
爬虫笔记5
第五关带参数请求数据分析过程 什么是带参数请求 我们能看到每个url都由两部分组成。前半部分大多形如:https://xx.xx.xxx/xxx/xxx,后半部分,多形如:xx=xx&xx=xxx&xxxxx=xx&……两部分使用?来连接。 这前半部分是我们所请求的地址,后半部分,就是我们的请求所附带的参数 如何带参数请求数据 读懂参数,有两个重要的方法是“观察”和“比较”。“观察”指的是阅读参数的键与值,尝试理解它的含义。“比较”指的是比较两个相近的XHR原创 2020-05-26 00:18:21 · 129 阅读 · 0 评论 -
爬虫学习笔记
这里写自定义目录标题第四关解密xhr第四关解密xhr问题1:如果常规爬取下来的信息不对应该如何? 分析:为什么我们刚才没办法拿到歌曲清单呢?答,这是因为我们刚刚写的代码,只是模拟了这52个请求中的一个(准确来说,就是第0个请求),而这个请求里并不包含歌曲清单。 方法:1.查看network 作用:记录在当前页面上发生的所有请求 所有请求,最终组成在Elements中看到的网页源代码。 2.找到这个页面的第0个请求,查看它的Preview或Response 没有我们想要的评论信原创 2020-05-24 23:49:40 · 110 阅读 · 0 评论 -
数据分析
今日学习总结一、使用excel函数处理分析数据:VLOOKUP联想:与sql和excel函数的关联性VLOOKUP(lookup_value,table_array,col_index_num,[range_lookup])搜索的值,包含查找值的单元格区域或数组,搜索值所在区域位置,精确值VLOOKUP函数最常用的10种用法text自定义文字格式ctrl+shift+方向键盘之间的快捷组合键组合一:Ctrl快捷键同时对多单元格进行内容输入组合三:Ctrl键完整显示当前单元格对应公式内容组原创 2020-05-23 00:01:37 · 278 阅读 · 0 评论 -
认识爬虫
第0关认识爬虫认识爬虫:目的浏览器的原理 先请求(浏览器),后响应(服务器) 本质 利用程序在网上拿到对我们有价值的数据。 爬虫工作原理 模拟浏览器去向服务器发出请求 服务器响应后,爬虫程序可以代替浏览器帮我们解析数据 爬虫可以根据我们设定的规则批量提取相关数据 最后,爬虫可以批量地把数据存储到本地。 概要 爬虫学习大纲 爬虫大纲 第0关,初识爬虫,你会了解爬虫的工作原理,写出一个简单的爬虫程序,学会爬虫的第0步:获取数据。 第1关,你将会快速入门HTM原创 2020-05-16 22:32:43 · 284 阅读 · 0 评论 -
python爬梯子day6
类与继承1.烤地瓜-扩展版 以面向对象的方式分析烤地瓜# 面向对象开发的步骤# 1. 抽象类,在定义中定义类# 人类# 地瓜类# 2. 分析人类中的成员: 属性和方法# 2.1 属性: 名字,烤龄,性别,。。。# 2.2 方法: 烤地瓜方法, 添加佐料的方法# 3. 分析地瓜类中的成员: 属性和方法# 2.1 属性: 烤地瓜的状态,烤地瓜的时间,佐料列表# 2....原创 2020-03-01 23:34:01 · 249 阅读 · 0 评论 -
python爬梯子day5
文件的操作1.要求能对以下内容进行描述文件的用途 相对路径和绝对路径的概念 文件四种操作:打开、关闭、写入、读取的使用方式 读取文件的四种方式区别 文件操作的七个功能是什么2.能读懂代码文件备份 文件备份-大文件版 文件批量重命名 名片管理系统-文件版1.2.2如果文件的操作模式是r模式,read(5)表示读取5个字符串的数据# file = open("1.text","r",e...原创 2020-02-28 23:25:47 · 275 阅读 · 0 评论 -
python爬梯子day4
文件操作和应用1.1集合学习集合:利用集合对容器里的数据进行去1.集合的特点2.数据是唯一的,不重复3.集合也是一个可变类型#定义集合my_list = {"a","b",1,2}#集合的增删改查my_list.add("c")print(my_list,id(my_list))my_list.remove(1)print(my_list,type(my_list)...原创 2020-02-27 01:15:45 · 198 阅读 · 0 评论 -
python爬梯子day3
函数(三)1.1 递归函数一个函数在内部不调用其它的函数,而是自己本身的话,这个函数就是递归函数def show(num): print("haha") #num == 1 表示结束递归调用的条件,不让自己调用自己 if num == 1: #当满足某个条件的时候,不让自己调用自己 print() else: ...原创 2020-02-26 01:48:42 · 479 阅读 · 0 评论 -
python爬梯子day2
函数(二)1.1函数参数<1>. 缺省参数定义:`调用函数时,缺省参数的值如果没有传入,则取默认值`def printinfo(name, age=35): # 打印任何传入的字符串 print("name: %s" % name) print("age %d" % age)# 调用printinfo函数printinfo(name="miki")...原创 2020-02-26 01:34:51 · 327 阅读 · 0 评论 -
python 基础day1
函数(一)1.函数的介绍 **1. 一串用于提高编写效率和代码复用率的代码模块。**2.函数定义、调用(1).定义:def 函数名(): 代码(2).调用:#函数名() printInfo()3.注意:每次调用函数时,函数都会从头开始执行,当这个函数中的代码执行完毕后,意味着调用结束了当然了如果函数中执行到了return也会结束函数(1)函数的参数定义、调用...原创 2020-02-25 01:42:44 · 164 阅读 · 0 评论