requests进阶

第2关:requests 进阶 文件,得知你的相关信息,从而做出相应的动作,如在页面显示欢迎你的标语,或者让你不用输入。、密码、浏览过的网页、停留的时间等信息。协议是无状态的,也就是每个请求都是独立的。那么登录后的一系列动作,都需要用。来验证身份是否是登录状态,为了高效的管理会话,保持会话,于是就有了。相当于一个虚拟的浏览器,在这个浏览器上处于一种保持登录的状态。文件,它是一个非常小的文本文件,可以记录你的用户。是一种管理用户状态和信息的机制,与。平台会对你编写的代码进行测试,当。, 以百度搜索为例,在。登录成功后,会话会生成。 阅读详情

还有10天就要开始中科大ctf了,对于小白的我,焦虑又刺激,话不多说,如果你和我一样都是小白,那我们麻溜的开始requests吧

上一次写爬虫用到了requests模块几个简单的函数,今天继续学习
我先学了学HTTP的基础
然后开始学requests
这里是requests官方文档网址

本地测试先搭建好服务端的环境

//这些是客户端向服务器发送的数据
<?php
echo 'HEADER: ';
print_r(apache_request_headers());
echo 'GET: ';
print_r($_GET);
echo 'POST: ';
print_r($_POST);
echo 'FILES: ';
print_r($_FILES)
?>

客户端代码测试一下

import requests
from requests import *
payload = {'key1': 'value1', 'key2': 'value2'}
# params相当于/?key1=value1&key2=value2
r = requests.get('http://127.0.0.1/experiment/requests/', params=payload)
# data是post数据
# r = requests.post('http://127.0.0.1/experiment/requests/', data=payload)

print(r.url) #url
print(r.text) #相应内容

返回结果
在这里插入图片描述

好的完美,我们可以进行接下来的学习了

import requests
from requests import *
import json
payload = {'key1': 'value1', 'key2': 'value2'}
headers={'user-agent':'hello_gay'}

# *****************  GET  *********************

r = requests.get('http://127.0.0.1/experiment/requests/', params=payload,headers=headers)
# 1.params相当于/?key1=value1&key2=value2
# 2.headers是设置请求头
# 3.json=payload自动把payload转换成json格式
# 或者使用json.dumps(payload)编码json.loads(json)解码然后用params传送
# 4.cookies={'cookies_are': 'working'}设置cookie
# 5.allow_redirects=False禁用重定向
# 6.timeout=0.001超时后停止等待响应


# ***************  POST  ***********************

# files={'file':open('1.png','rb')}
files = {'file': ('report.csv', 'some,data,to,send\nanother,row,to,send\n')} #字符串作为文件发送
r = requests.post('http://127.0.0.1/experiment/requests/', data=payload,files=files)
# 1.data是post数据
# 2.files=files上传文件

r = requests.post('http://127.0.0.1/experiment/requests/?key1=value', data=payload)
# 同时发送post和get请求



# **************  返回信息输出  ******************

r.encoding='utf-8'; #设置编码
print(r) #获得响应状态码
print(r.content)  # 字节形式显示内容: b'HEADER: Array\n......'
# print(r.json()) #json解码
print(r.url) #如果有重定向输出重定向之后的地址
# print(r.history) #许重定向时用
print(r.headers)  #响应头,服务器向客户端响应的数据
print(r.text) #响应内容

print(r.raw.read()) #原始套接字相应(原始字节流),requests时需设置stream=True
# with open('raw.txt', 'wb') as fd:  #存储流式传输的内容视频,音频等
#     for chunk in r.iter_content():  #iter_content自动解码gzip,deflate等
#         fd.write(chunk)

往下学之前需要先了解一些http其他更深入一些的东西,否则会有点看不懂哦
HTTP头详解
HTTP头字段类型
POST常见的数据格式
稍稍总结一下特殊的

客户端发送服务器响应
Accept,Accept-CharsetContent-Type
Accept-LanguageContent-Language
User-AgentServer

官方高级教程地址

import requests
from requests import *

payload = {'key1': 'value1', 'key2': 'value2'}
headers={'user-agent':'hello_gay'}
proxies={'http':'http://127.0.0.1','https':'https://127.0.0.1'}
# proxies = {'http': 'http://user:pass@127.0.0.1'} #base认证

# **************  session  **************
# 当你要给一个主机发送多个请求的时候使用Session保存会话
s = requests.Session()
# session设置默认发送数据
# s.auth={'user':'pass'}
# s = requests.get('http://127.0.0.1/experiment/requests/', params=payload,headers=headers,proxies=proxies)
# {'user-agent':'hello_gay'}和{'user':'pass'}都将被发送
# 方法级参数不会在请求中保留,例如在requests.get(url,cookies={'cookie','aaa'})


# ******************  预处理  *********************
req=requests.Request('POST','http://127.0.0.1/experiment/requests/',data=payload,headers=headers)
pre=req.prepare()
# pre.body='this is a prepared body' #相当于发送的data=payload部分
del pre.headers['Content-Type']
pre.headers['Keep-Dead'] = 'parrot'
r=s.send(pre,stream=True,timeout=0.1,proxies=proxies)


print(r.text)
#服务器返回headers
print(r.headers)
#发送请求headers
print(r.request.headers)
print(r.request.body)



ctf几个例题

讲解在这个网站里面有几个ctf的例题
1.速度要快
解题代码

import requests
import base64

url = 'http://123.206.87.240:8002/web6/'
r = requests.session()
# 题目中每次发送请求都会重新设置cookie,所以应当使用同一个会话
pre = r.get(url)
flag64 = pre.headers['flag']
flag1 = base64.b64decode(flag64)
flag2 = flag1.decode()[15:]
# flag1.decode(): 跑的还不错,给你flag吧: NjE4NTE3
flag3 = base64.b64decode(flag2)
# flag2: ODI2MjY1
flag = flag3.decode()
# flag3.decode(): 551057
res = r.post(url, data={'margin': flag})
print(res.text)

2.秋名山老司机

import requests
from bs4 import BeautifulSoup

url = 'http://123.206.87.240:8002/qiumingshan/'
s = requests.session()
#和上一个一样也是同一个session
r = s.get(url)
beauty = BeautifulSoup(r.text)
cal = beauty.find_all('div')[0].string[:-3]
res = eval(cal)
flag = s.post(url, data={'value': res})
print(flag.text)

3.快速口算

import requests
import re

url = 'http://lab1.xseclab.com/xss2_0d557e6d2a4ac08b749b61473a075be1/index.php'
s = requests.session()
r = s.get(url)
cal = re.search("[0-9+*()]+[)]", r.text).group()
flag=s.post(url,data={'v':eval(cal)})
print(flag.text)

4.cookies欺骗

import requests
import re

for i in range(0,30):
    url='http://123.206.87.240:8002/web11/index.php?line='+str(i)+'&filename=aW5kZXgucGhw' 
    r=requests.get(url) 
    print (r.text)

url = 'http://123.206.87.240:8002/web11/index.php?line=&filename=a2V5cy5waHA='
r = requests.get(url,cookies={'margin':'margin'})
print(r.text)

其他的问题
json和python中字典的区别和联系

CTF比赛中的常见题型 CTF比赛中的常见题型目录,给初学者提供学习方向。CTF(Capture The Flag)中文一般译作夺旗赛,在网络安全领域中指的是网络安全技术人员之间进行技术竞技的一种比赛形式。 立即下载

相关推荐

ubuntu虚拟机搭建OP-TEE

在网上找了一些搭建OP-TEE的过程,模仿着进行搭建,结果有好多报错,为了方便自己以后重新搭建,所以将整个过程记录下来。

weixin_44213847的博客 1003

Python.Requests库进阶应用

cookie设置 设置Cookie import requests cookie = {'hero': 'alix'} r_cookie = requests.get(base_url + '/cookies', cookies= cookie) print(r_cookie.text) 运行结果 { "cookies": { "he...

diaochu1346的博客 227

从零到一:基于Blazor和Elsa Workflows的工作流系统开发实战

本文详细介绍了如何利用Blazor和Elsa Workflows构建高效的工作流系统,从技术选型到生产环境部署,涵盖动态工作流建模、Blazor前端集成及性能优化等核心内容。通过实战案例,展示如何实现订单处理系统的自动化与灵活性,提升企业流程效率。

weixin_26875109的博客 431

Python - requests 模块 - 进阶之路 - Day07

1、模块说明 requests是使用Apache2 licensed 许可证的HTTP库。 用python编写。 比urllib2模块更简洁。 Request支持HTTP连接保持和连接池,支持使用cookie保持会话,支持文件上传,支持自动响应内容的编码,支持国际化的URL和POST数据自动编码。 在python内置模块的基础上进行了高度的封装,从而使得python进行网络请求时,变得人性化,使用Requests可以轻而易举的完成浏览器可有的任何操作。 现代,国际化,友好。 requests会

lixiang5453的博客 1025

FPGA以太网通信实战(一):实现MDIO接口驱动,掌控PHY芯片的钥匙

本文介绍了以太网通信技术及其核心组件。首先概述了以太网的发展历程,从标准以太网(10Mbps)到万兆以太网(10Gbps)的技术演进。重点分析了以太网接口的两大核心部件:MAC控制器负责数据链路层协议处理,PHY芯片负责物理信号转换和连接管理。文章详细解读了MDIO接口规范,包括帧格式和读写时序,并以YT8531 PHY芯片为例,介绍了其寄存器配置方法。最后设计了一个FPGA实现方案,通过MDIO接口完成PHY芯片的软复位和状态监测功能,并利用LED指示灯实时显示网络连接速率。

weixin_64402689的博客 1663

QTableView为例:Qt模型视图委托(MVD)(Model-View-Delegate)

QT中的MVD(模型-视图-委托)模式是一种类似于MVC的设计模式,将数据、界面和交互逻辑分离。模型负责数据管理,视图负责显示界面,而委托则嵌入在视图中处理数据的显示和编辑。QT提供了多种视图组件(如QListView、QTreeView、QTableView)和模型类(如QStandardItemModel、QAbstractItemModel),支持数据的多样化呈现。委托(Delegate)通过定制显示和编辑行为增强了视图的灵活性。该模式适用于各类数据结构展示(列表、表格、树形),能够高效处理数据与界面

菜一头包的博客 1991

关于无参数RCE的一些奇技淫巧

​ 的payload来实行攻击的,大不了就出现了一些waf需要绕过。但是,有的时候,他们相关的waf特别奇葩,像是过滤了所有的字母以及数字什么的,另外,就是这篇博客最主要说明的题目,就是无参数RCE:​ 经过了它的过滤之后,最后只有a(b(c()));这样的payload才不会被过滤了。正则表达式 [^\W]+((?R)?) 匹配了一个或多个非标点符号字符(表示函数名),后跟一个括号(表示函数调用)。其中 (?R) 是递归引用,它只能匹配和替换嵌套的函数调用,而不能处理函数参数。

qq_66013948的博客 904

/lib//libclntsh.so: file format not recognized; treating as linker script

centos7.7+oracle19.3 建库过程报错:预检查都是通过的 /oracle/product/19.3.0/db_1/lib/libasmperl19.a -Wl,--no-whole-archive -lclntsh -lclntshcore -lasmclntsh19 -lhasgen19 -lskgxp19 -locr19 -lcell19 -lirc INFO: /usr/bin/ld:/home/app/oracle/product/19.3.0/db_1/li...

sqlora的专栏 9915

头歌requests爬虫-第一关

import requests def get_html(url): ''' 两个参数 :param url:统一资源定位符,请求网址 :param headers:请求头 :return:html ''' # ***************** Begin ******************** # # 补充请求头 headers={"User-Agent": "Mozilla/5.0 (Windows NT.

dearlwy521的博客 1万+

shader多图叠加变换

shader Shader "Paint3D/AddTexture" { Properties { _MainTex ("Main Texture", 2D) = "white" {} _MainColor("Main Color", Color)=(1,1,1,1) _AddTex0 ("Texture0", 2D) = "white" {} _AddTex1 ("Texture1", 2D) = "white" {} .

李长江的博客 909

信息奥赛课课通(C++)p154-1近似排序

试题描述 读入一对正整数,将这两个数之间(包括这两个数本身)的所有数按下述特别规则排序后输出,该特别规则是按两数倒过来的值进行比较决定其大小,如30倒过来为3,29倒过来为92,则29大于30. 输入要求 1行,包含两个用空格隔开的自然数,这两个自然数给出了待排序数的范围,其中1≤第一个数≤第二个数≤999999999,两个数之差不超过100. 输出要求 输出排序后的数据,每行输出...

mengdicfm的博客 7287

Requests从入门到进阶

ddd

临渊-测试开发 2859

FM1288回声消除芯片调试方案 - 综述

专栏文章概览

优快云mianfeixiazai001的博客 1715

Python爬虫进阶:从Requests到Scrapy框架

在当今数据驱动的时代,网络爬虫已成为获取互联网数据的重要手段。从简单的网页抓取到复杂的网站数据采集,Python凭借其丰富的库生态系统,提供了从基础到高级的多种爬虫解决方案。本文将系统介绍Python爬虫技术的发展路径,从基础的Requests库到强大的Scrapy框架,深入探讨两者的应用场景、实现原理和进阶技巧,并通过实战案例展示如何构建高效、稳定的网络爬虫系统。

weixin_65409651的博客 1534

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

requests用法基础-进阶

本节内容 模块的安装 -----------------------基础用法--------------------- GET用法、POST用法 -----------------------进阶用法-------------------- cookie处理、代理ip、session 一 模块安装: 1). 安装requests包还是很方便的,电脑中有python环境,...

微赚淘客开发者博客 175

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

【Python进阶】requests模块的基础使用

python的requests模块基础教学

hackchat的博客 972

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

python requests 进阶用法

文章目录一. 会话对象1.1会话对象可以跨请求保持某些参数,1.2 会话可以为请求方法提供缺省数据1.3 参数合并1.4 建议使用的代码方式:上下文管理器 一. 会话对象 1.1会话对象可以跨请求保持某些参数, 会话对象具有requests API的所有方法. >>> import requests >>> s = requests.Session() >>> s.get("http://httpbin.org/cookies/set/sessionco

诸葛老刘的博客 506

爬虫中之Requests 模块的进阶

requests进阶内容 session处理cookie proxies参数设置请求代理ip 基于线程池的数据爬取 引入 有些时候,我们在使用爬虫程序去爬取一些用户相关信息的数据(爬取张三“人人网”个人主页数据)时,如果使用之前requests模块常规操作时,往往达不到我们想要的目的,例如: #!/usr/bin/env python # -*- codin...

weixin_30483697的博客 86

Python教程:Requests 进阶操作

人生苦短,我用 Python 超时设置 前面我们在介绍 urllib 的时候也介绍过超时,我们现在来看下在 Requests 中的超时应该怎么写。 import requests r = requests.get("https://www.geekdigging.com/", timeout = 1) print(r.status_code) 具体的执行结果小编就不贴了。 注意 time...

Python免费教程 663

第三章 爬虫提速、selenium模块、requests模块进阶

此章节讲解,如今市面大多数爬虫最后技术,分别:处理cookie、防盗链、代理、线程、进程、协程、异步http请求aiohttp模块、selenium模块。

2403_88453964的博客 1592

Requests库 进阶

高级用法 本篇文档涵盖了 Requests 的一些高级特性。 会话对象 会话对象让你能够跨请求保持某些参数。它也会在同一个 Session 实例发出的所有请求之间保持 cookie,期间使用 urllib3 的 connection pooling 功能。所以如果你向同一主机发送多个请求,底层的 TCP 连接将会被重用,从而带来显著的性能提升。 (参见 HTTP persis

weixin_38099532的博客 372

3-4 requests模块进阶-1

3-4 requests模块进阶 3-4 requests模块进阶-1 requests_01/demo2.py import requests import time # 0.0001秒之内返回网页数据 start_time = time.time() response = requests.get(url="https://www.imooc.com") print(response.text) end_time = time.time() print(en...

huanglianggu的专栏 145

python Requests用法进阶

发送请求 使用 Requests 发送网络请求非常简单。 一开始要导入 Requests 模块: >>> import requests 然后,尝试获取某个网页。本例子中,我们来获取 Github 的公共时间线: >>> r = requests.get('https://github.com/timeline.json') 现在,我们有一个名为 r

大蛇王的博客 1631
上一篇: ctf python-Image模块学习
下一篇: 中科大ctf题型总结,来自小白的感慨
小健健健
博客等级 码龄8年 101粉丝 68原创
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值