使用requests获取并向headers中添加cookie

原创 已于 2022-10-19 11:00:26 修改 · 3.8w 阅读 · 31 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#获取/添加cookie

于 2019-03-13 21:31:17 首次发布
本文介绍如何使用Python的Requests库发送带有Cookies的HTTP请求。通过设置请求头中的User-Agent和使用requests.get方法，可以获取网站返回的Cookies，并在后续请求中重新发送这些Cookies，实现与服务器的会话管理。 
import requests


headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.102 Safari/537.36',
}
url = 'http://xxx.xxx.xxx'
resp = requests.get(url, headers)
source_cookies = resp.cookies.get_dict()  # 请求网站后返回的Cookie
print(source_cookies)

resp = requests.get(url, headers, cookies=cookies)  # 向请求头中添加服务器返回的Cookie
print(resp.text.encode('utf-8', errors='ignore'))
print(resp.status_code)
cookies = resp.cookies.get_dict()
print(cookies)
第4章-07-将WebDriver获取的Cookie传递给Requests
黑夜开发者的博客
08-31 532
在使用Selenium WebDriver获取了浏览器的Cookies之后，你可以将这些Cookies传递给requests库，以便在后续的HTTP请求中使用这些Cookies。这样做可以让你模拟浏览器会话，使得请求看起来像是从之前使用Selenium WebDriver控制的浏览器发出的。
Requests(8)：Requests模块_添加cookie
奔跑在路上you的博客
08-26 936
cookie_dict = {"login_name":"admin"} # cookie做一个变量，然后再请求中使用cookies。对于某些网站，登录然后从浏览器中获取cookies，以后就可以直接拿着cookie登录了，无需输入用户 名密码。# 添加cookie绕过登录phpwind论坛。# 1.手动打开论坛获取登录后的cookie。# session添加cookie。在发送请求时使用cookies。# 方法2： 推荐使用。# 2.添加cookie。# 1，在参数中添加。
请求头中的Cookie和Referer（学习笔记）
ldk的博客
07-19 1230
Cookie 是保存在客户端（通常是浏览器）上的一个小型文本文件。它由服务器发送，并且在之后的每次请求中，客户端都会自动将这个 Cookie 附带到请求头中，发送回服务器。在用户登录之后，为了能够准确地获取到用户的登录信息，服务器通常会生成一个唯一的 Session ID，并将其存储在 Cookie 中。这个 Cookie 会跟随请求头一起提交到服务器。这样，服务器就能够识别出这是哪一个用户，从而返回相应的数据。可以使用 模块 requests 的session来模拟这种行为。session。
requests设置cookie和headers
定格空间
07-09 3487
通过服务端打印可以看出，如果我们不设置User-Agent， requests模块的请求头是python-requests/2.21.0，这不是正常浏览器的请求头，这也是为什么我们做爬虫时一定要修改请求头的一个原因 使用requests.session()可以帮助我们保存这个会话过程中的所有cookie，可以省去我们自己获取上一个请求的cookie，然后更新cookie后重新设置再进行请求这类操作 通过s.cookies 和s.headers设置的整个会话中都会携带的cookie和header 通过s.g.
告别Cookie混乱：Requests Jar完全控制指南
gitblog_00913的博客
09-24 233
你是否曾因网页记住登录状态而困惑？是否在爬虫开发中因Cookie处理不当导致请求失败？本文将彻底解决这些问题，通过Requests库的Cookie管理功能，让你轻松掌控Jar操作与域路径控制，实现精准的Cookie管理。读完本文，你将掌握Cookie的添加、修改、删除技巧，以及跨域请求时的Cookie策略，让你的HTTP请求更加高效和可靠。 ## Cookie管理核心组件 在开始之前，让我们先...
不在同一域名下，在headers请求头中添加Cookie值
qq_42858057的博客
07-04 3851
http://www.aaa.com域名下的ajax请求想获取http://www.bbb.com域名下的服务器的数据。 这是http://www.aaa.com域名下的ajax请求： $.ajax({ type:"post", url:"http://www.bbb.com/project/testInterface", dataType:"json", data:params, headers:{ "Cookie":“KikGlkjkGDJIGJdgKsdKJasAfasASDFtes
HTTP--Request Headers及Cookies
diaochuangqi7487的博客
12-08 3142
简介： HTTP客户程序（例如浏览器），向服务器发送请求的时候必须指明请求类型（一般是GET或者POST）。如有必要，客户程序还可以选择发送其他的请求头。大多数请求头并不是必需的，但Content-Length除外。对于POST请求来说Content-Length必须出现。 下面是一些最常见的请HTTP请求头概述 （HttpServletRequest） 类型： Accept：...
@RequestHeader("")和@CookieValue("")
tyust512的专栏
07-21 335
使用方法@RequestMapping(value = "/test", method = RequestMethod.GET) public void getHello( @RequestHeader ("host") String host, @RequestHeader ("Accept") String acceptType,
使用python将请求的requests headers参数格式化方法
09-19
### 使用Python将请求的Requests Headers参数格式化方法 在Web开发和自动化测试中，经常会遇到需要构造HTTP请求的情况。为了确保请求能够被正确地解析和处理，我们需要将Headers信息进行适当的格式化。本文将详细...
利用Python的requests实现SCU的登录获取Cookie
12-21
在本文中，我们将探讨如何利用Python的requests库来实现对四川大学（SCU）网站的登录，并获取登录后的Cookie。这个过程通常用于网络爬虫，以便在登录后访问受保护的网页内容。以下是对实现这一目标所涉及的关键知识...
requests中携带cookie爬取
tzy2358的博客
03-19 826
首先我们先访问网站，获取它的cookie值，然后携带着我们的账号好密码，再次请求登录上去的网站的内容。首先得得到验证码 需要把他下载到本地上。) 用一个现成的验证码代码。1. 爬出17k小说网。
爬虫之requests模块在headers参数中携带cookie发送请求
IT之一小佬的博客
01-23 7946
爬虫之requests模块在headers参数中携带cookie发送请求 网站经常利用请求头中的Cookie字段来做用户访问状态的保持，那么我们可以在headers参数中添加Cookie，模拟普通用户的请求。我们以github登陆为例： 1.1 github登陆抓包分析 打开浏览器，右键-检查，点击Net work，勾选Preserve log 访问github登陆的url地址https://github.com/login 输入账号密码点击登陆后，访问一个需要登陆后才能获取正确内容的url.
接口自动化:requests用法；header、cookie的处理
HHX_man的博客
03-16 620
学习打卡第4天今天学习主题：接口自动化（python+pytest+requests）学习目标：结合项目写出自动化接口脚本学习阶段：1、环境搭建+第三方库安装-✅2、用例编写框架-进行中---
（请求）获取 Cookie/Session 以及 Header
MissedID_的博客
07-31 518
Cookie是客户端（也可以伪造）Session是服务端（校验）会话就是对话，一段时间内的话cookie中存有sessionID，访问流程第二步中：第三步中：不管请求什么，会把带上。
springmvc之@RequestHeader请求头注解和@CookieValue注解
cyang的博客
01-09 1026
@RequestHeader @requestMapping（value=”/demo“ method=requestMethod.GET）public String get(@RequestHeader(value="Accept-lauguage") String al){ systhem.out.println("Accept-lauguage"+al);} @Cookie
关于 HTTP 请求响应字段 Set-cookie 的作用
孔乙己的博客
08-22 2823
Set-CookieSet-Cookie作为HTTP协议的一部分，在 Web 开发中起到了至关重要的作用。它不仅仅是一个简单的头字段，而是一个强大的工具，可以用于管理用户状态、增强安全性和个性化用户体验。通过深入理解Set-Cookie的工作机制和属性，开发者可以创建出更安全、更高效的 Web 应用，同时为用户提供更好的体验。这个工具的精妙之处在于它的灵活性，可以适应不同场景下的需求，从而在各种复杂的 Web 开发项目中发挥关键作用。
代理地址情况下获取request header中的cookie值
yuhan___的博客
12-13 2159
1、 在我们用代理地址获取接口数据时，无法获取到request header中cookie的值（客户端暂存服务端的信息），可以使用以下方法将后台cookie的值获取到。 // 数据接口put asyncpostDa(){ constdata=this.ruleForm; document.cookie="gr_user=admin"; document.cookie= "gr_remember=16f4f90d67...
Python中requests模块get请求、post请求添加头部、添加Cookie
热门推荐
SDBX_lyp的博客
04-12 1万+
1、GET请求 # requests GET请求 import requests # 第一种 url = 'https://www.sogou.com/web?query=python' rep = requests.get(url) print(rep) # 输出 <Response [200]> # 第二种 url1 = 'https://www.sogou.com/web' params = {'query': 'python'} rep1 = requests.get(url
2.RequestParam、RequestHeader、CookieValue注解
学习新知识
07-23 746
在处理方法入参处使用 @RequestParam 可以把请求参数传递给请求方法 value：参数名 required：是否必须。默认为 true, 表示请求参数中必须包含对应的参数，若不存在，将抛出异常 @RequestMapping(value="testRequestParam") public String testRequestParamMethod (@RequestParam
如何利用python获取request headers中的cookie
最新发布
10-28
<think>首先，用户的问题是：“我想查找利用Python获取request headers中cookie的方法”。所以，我需要聚焦在如何用Python从HTTP请求头中获取Cookie。 回顾提供的引用： - 引用[1]：关于Python中flask.request.headers的用法。这显示了在Flask框架中如何使用request.headers来获取头部信息。 - 引用[2]：讨论使用Python的Requests库获取请求头和响应头。 - 引用[3]：展示了如何提取cookie和token。它提到了requests.post并使用cookies参数。 - 引用[4]：关于Python3下request处理cookie的两种方法，提到了headers的User-Agent。 - 引用[5]：关于Python爬虫中header伪装策略。 用户特别提到“获取request headers中cookie”。在HTTP中，Cookie通常在请求头的Cookie字段中。 关键点： - 在Flask中，request.headers包含所有头部信息。 - 在Requests库中，当发送请求时，cookie可以通过cookies参数设置，但获取请求头的cookie呢？用户问的是获取请求头中的cookie，意思是当服务器接收请求时，如何提取cookie。 用户的问题是：“利用Python获取request headers中cookie的方法”。所以，这可能是从服务器端（如Flask）或客户端（如Requests库）获取。 从引用看： - 引用[1]是关于Flask的request.headers。 - 引用[2]是关于Requests库获取headers。 - 引用[3]展示了从JSON响应提取token，并设置headers。 用户说“获取request headers中cookie”，所以我需要解释如何获取请求头中的cookie字段。 在HTTP请求中，cookie通常在Cookie头部。 在Python中： 1. **服务器端（如Flask）**：使用框架如Flask来处理传入请求。 - 在Flask中，request.headers.get('Cookie') 获取cookie字符串。 - 或者使用request.cookies 来获取cookie字典（Flask提供了这个便捷方法）。 2. **客户端（如爬虫）**：使用Requests库时，当发送请求，cookie可能被设置；但当接收响应时，响应头可能有Set-Cookie，但请求头中的cookie是由客户端发送的。 用户说“获取request headers中cookie”，可能意味着： - 作为服务器：解析传入请求的cookie。 - 或作为客户端：查看请求头（但在Requests库中自定义请求时）。 从引用[3]，它展示了设置headers中的Authorization和cookies。 引用[3]： "headers={"content-type":"application/json;","Authorization":login_token_info}, cookies=login_cookie_info" 这里，在发送请求时，使用cookies参数设置cookie，headers设置其他头。 但用户问获取request headers中cookie，意思是读取它。 在服务器上下文：当Python应用是服务器时，获取请求的cookie。 在客户端上下文：当Python脚本是客户端时，获取自定义请求的cookie（但通常是设置它）。 用户消息结尾："我想查找利用Python获取request headers中cookie的方法"，所以可能是服务器端。 引用[1] explicitly mentions flask.request.headers, which is server-side. 使用系统指令：我必须使用中文回答，结构清晰，生成相关问题。 回答结构： 1. **引言**：解释问题。 2. **方法**：提供Python代码示例。 - 使用Flask框架（服务器端）。 - 或者使用Requests库（客户端？但获取请求头可能需要不同）。 在客户端使用Requests库时，当发送请求，cookie是通过cookies参数设置的，而不是直接从请求头获取；但在调试时，可以打印请求头。 例如，在Requests中，可以访问请求对象的headers：request.headers。 但通常，cookie是单独处理的。 最佳实践： - 对于服务器端：使用Flask或Django。 - 对于客户端：在Requests中，cookie是通过session.cookies或响应对象的cookies获取。 用户说“request headers”，所以可能焦点在headers对象。 从引用[1]："flask.request.headers" 可以获取所有headers。 类似地，在Requests库，当创建请求对象，可以访问headers。 但为了准确，我应该基于引用。 引用[1]: "flask.request.headers方法的典型用法" – 所以主要服务器端。 引用[2]: "通过使用Python的Requests库，我们可以方便地获取请求和响应的headers" – 响应头是指服务器的响应，但请求头是指客户端发送的请求头。 在Requests库： - 当发送请求：request = requests.get(url, headers=...) - 然后，request.request.headers 可以获取发送的请求头（但在发送后）。 用户可能混淆了上下文。 在用户问题中，是“获取request headers中cookie”，但在Python中，常见的是： - 作为服务器：解析cookie。 - 作为客户端：设置cookie或处理响应。 但从引用，引用[1]是服务器端，引用[2]是客户端获取响应头。 我应该覆盖两种场景。 但用户指定“request headers”，所以可能是服务器端。 让我们看一下引用[3]: "提取token" 和 "headers={"content-type":"application/json;","Authorization":login_token_info}, cookies=login_cookie_info" – 这里是设置headers和cookies在客户端请求。 但获取：在响应中。 用户说“获取request headers”，request headers是传入的请求。 所以，我认为服务器端是更合适的。 在回答中，我可以先解释服务器端方法。 代码示例： 在Flask中： ```python from flask import Flask, request app = Flask(__name__) @app.route('/') def index(): cookie_header = request.headers.get('Cookie') # 获取Cookie字符串 # 或者更好的是使用request.cookies cookies = request.cookies # 这是一个字典 return f"Cookies: {cookies}" ``` request.cookies 直接给出解析后的cookie字典。 request.headers.get('Cookie') 给出原始字符串。 在客户端使用Requests时： 如果用户想在发送请求前获取设置的cookie，但cookie通常是设置，不是获取；除非在会话中。 例如： ```python import requests session = requests.Session() response = session.get('http://example.com') # 现在，session.cookies 中有cookie # 但要获取请求头，在发送后: request = response.request headers = request.headers cookie_str = headers.get('Cookie') # 如果有 ``` 但这有点绕。 或许用户主要是服务器端。 基于引用[1]，聚焦Flask。 生成相关问题。 回答结构： 1. 解释如何从Flask中获取cookie。 2. 提供代码示例。 3. 提到其他方法。 4. 结束生成相关问题。 使用中文。 添加引用标识。 引用[1] 是关于flask.request.headers。 引用[3] 有cookie相关。 在末尾添加引用。 相关问题： 1. Flask中如何设置cookie？ 2. 如何解析Cookie字符串？ 3. 等等。 确保LaTeX语法正确：用户问题中没有数学，所以可能不需要。 </think>### 获取Python中request headers的cookie方法 在Python中，获取HTTP请求头（request headers）中的cookie，通常发生在服务器端处理传入请求时（如使用Flask框架），或在客户端（如使用Requests库）分析自定义请求。cookie信息存储在请求头的`Cookie`字段中（格式为键值对字符串）。以下是针对不同场景的详细方法总结，基于您提供的引用内容（特别参考引用[1]和引用[3]，因为它们直接涉及headers和cookie处理）。 #### 1. **服务器端：使用Flask框架获取request headers中的cookie** - Flask的`request.headers`对象提供了所有HTTP请求头信息，包括`Cookie`字段。您可以直接提取原始cookie字符串，或使用Flask内置的`request.cookies`方法获取解析后的字典（更推荐，因为它更易用）。 - **代码示例**： ```python from flask import Flask, request app = Flask(__name__) @app.route('/get-cookie') def get_cookie(): # 方法1: 直接从headers获取Cookie字符串（原始格式如"key1=value1; key2=value2"） cookie_header = request.headers.get('Cookie') # 方法2: 使用request.cookies获取解析后的字典（更方便） cookies_dict = request.cookies return { "cookie_header": cookie_header, # 可能为None如果没有cookie "cookies_dict": cookies_dict # 字典格式，如{'key1': 'value1', 'key2': 'value2'} } ``` - **解释**： - `request.headers.get('Cookie')`：返回完整的cookie字符串，需手动解析。 - `request.cookies`：Flask自动解析cookie为字典，推荐使用[^1]。 - **注意事项**：在Flask中，`request.cookies`已经处理了cookie的解析，避免直接操作字符串以减少错误。 #### 2. **客户端：使用Requests库获取自定义请求的cookie（较少见，主要用于调试）** - 当Python脚本作为客户端发送HTTP请求时（如爬虫），cookie通常通过`cookies`参数设置；但如果您需要获取发送请求头中的cookie信息（例如调试），可以在请求发送后访问`request.headers`属性。 - **代码示例**： ```python import requests # 创建一个会话并发送请求 session = requests.Session() response = session.get( 'http://example.com', headers={'User-Agent': 'Mozilla/5.0'}, # 设置headers，如引用[4]和引用[5]提到的User-Agent cookies={'key1': 'value1'} # 设置cookie ) # 获取发送的请求头（包含cookie） sent_request = response.request headers = sent_request.headers cookie_str = headers.get('Cookie') # 提取Cookie字段值 print(f"请求头中的Cookie: {cookie_str}") # 输出如"key1=value1" ``` - **解释**： - 在Requests库中，`response.request.headers`包含发送请求的头信息，包括`Cookie`字段。 - 此方法适用于调试，但实际开发中更常用`session.cookies`管理cookie（如引用[2]和引用[3]所示）[^2][^3]。 - **注意事项**：客户端场景下，cookie通常通过`session.cookies`或响应对象获取；获取请求头cookie仅在分析发送请求时有用。 #### 关键注意事项 - **cookie位置**：cookie在HTTP请求头中位于`Cookie`字段（服务器端）或通过`Set-Cookie`在响应头设置（客户端）。 - **安全性**：处理cookie时注意敏感数据（如token），避免泄露（引用[3]展示了token提取）。 - **框架推荐**：服务器端优先使用Flask的`request.cookies`获取字典；客户端优先使用Requests的`cookies`参数管理。 - 如果您的上下文未明确指定服务器或客户端，建议从Flask方法开始（推荐用于Web应用开发）[^1][^3]。 ###
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值