Python爬虫 requests库使用session会话保存cookies继续请求

最新推荐文章于 2025-07-05 06:50:28 发布
原创 最新推荐文章于 2025-07-05 06:50:28 发布 · 3w 阅读 · 30 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#Python #requests

本文介绍了一种使用Python的requests库实现微博登录的方法，并展示了如何通过保持会话状态来访问用户的个人信息页面。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

import requests

# 通过Session类新建一个会话
session = requests.Session()
post_url = 'https://passport.weibo.cn/sso/login'
# 往下使用requests的地方，直接使用session即可，session就会保存服务器发送过来的cookie信息
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.108 Safari/537.36',
    'Referer': 'https://passport.weibo.cn/signin/login?entry=mweibo&r=http%3A%2F%2Fweibo.cn%2F&backTitle=%CE%A2%B2%A9&vt=',

}
data = {
    'username': '17312345678', # 账号
    'password': 'password', # 密码
    'savestate': '1',
    'r': '',
    'ec': '0',
    'pagerefer': 'http://weibo.cn/',
    'entry': 'mweibo',
    'wentry': '',
    'loginfrom': '',
    'client_id': '',
    'code': '',
    'qq': '',
    'mainpageflag': '1',
    'hff': '',
    'hfp': '',
}

r = session.post(url=post_url, data=data, headers=headers)

# 上面的session会保存会话，往下发送请求，直接使用session即可
url = 'https://weibo.cn/6388179289/info'
headers1 = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.108 Safari/537.36',
}
r = session.get(url=url, headers=headers1)
print(r.text)
两万字博文教你python爬虫requests库【详解篇】
孤寒者的博客
07-12 63万+
两万字博文教你python爬虫requests库【详解篇】
【Python爬虫教程】第6篇-使用session发起请求
分享技术，记录思考和感悟
07-11 1068
尤其是在保持登陆状态时运用的最多，在某些网站抓取，或者app抓取时，有的时强制登陆，有的是不登陆返回的数据就是假的或者说是不完整的数据，那我们不可能去做到每一次请求都要去登陆一下怎么办，就需要用到保持会话的功能了，我们可以只登陆一次，然后保持这种状态去做其他的或者更多的请求。
python中requests模拟登录的三种方式(携带cookie/session进行请求网站)
01-21
一，cookie和session的区别 cookie在客户的浏览器上，session存在服务器上 cookie是不安全的，且有失效时间 session是在cookie的基础上，服务端设置session时会向浏览器发送设置一个设置cookie的请求，这个cookie包括session的id当访问服务端时带上这个session_id就可以获取到用户保存在服务端对应的session 二，爬虫处理cookie和session 带上cookie和session的好处： 能够请求到登录后的界面  带上cookie和session的弊端： 一个cookie和session往往和一个用户对应，访问太快容易被
关于requests的session方法无法保持cookie的问题。
热门推荐
falseen的博客
07-20 5万+
最近在做爬虫的时候遇到了一个问题，在用requests的session方法保持cookie的时候发现requests不能保持手动构建的cookie。起初以为requests只能自动保持由服务器返回的set-cookie语句中的cookie。后来查了很多资料，才终于明白。原来requests只能保持 cookiejar 类型的cookie，而我们手动构建的cookie是dict类型的。所以要把dict
Python编程：requests 库中的session
最新发布
倔强老吕的博客
07-05 1273
在 Python 的 requests 库中，Session 对象是一个非常重要的概念，它允许你在多个请求之间保持某些参数和状态。
Python3 requests库的cookies本地保存与读取
fishvi的博客
08-25 3602
保存cookies import requests import http.cookiejar session = requests.Session() session.cookies = http.cookiejar.LWPCookieJar(filename='cookies.txt') response = session.post(url, data) if response.status_code == 200: session.cookies.save(ignore_discar
python接口自动化中requests.session
liuqinhou的博客
06-24 3820
我们在测试中也会遇到这样一种情况，除了cookie之外，在请求时需要在header中加入额外的验证，这时我们可以用方法，将其余请求方法中的headers属性合并起来作为最终的请求方法的headerss = requests.session() # 实例化会话对象try:#进行登录#将X-CSRF-Token属性添加至session的header中，此后的请求请求头中会带上此属性print("登录异常".format(e))
Python爬虫requests库多种用法实例
09-16
Python的requests库是进行网络请求最常用的工具之一，尤其在编写爬虫程序时。这个库提供了简单易用的API来发起HTTP请求，并处理各种复杂的网络交互。以下是对requests库多种用法的详细解释： 1. **安装和使用**： ...
使用Python爬虫库requests发送请求、传递URL参数、定制headers
12-20
- **会话管理**：使用`Session`类进行会话管理，可以保持cookies和其他请求元数据。 `requests`库的强大之处在于它的灵活性和易用性。通过组合上述功能，可以轻松地构建复杂的网络请求逻辑。同时，`requests`库还...
Python requests之Session
java1234的博客
10-29 1940
在 requests 里，session对象是一个非常常用的对象，这个对象代表一次用户会话：从客户端浏览器连接服务器开始，到客户端浏览器与服务器断开。会话能让我们在跨请求时候保持某些参数，比如在同一个 Session 实例发出的所有请求之间保持 cookie。所以前面一讲的案例，我们可以简化下。
python的requests.session()_Python+requests之session保持会话
weixin_39754267的博客
12-03 760
session()方法会话对象让你能够跨请求保持某些参数。它也会在同一个 Session 实例发出的所有请求之间保持 cookie，如果你向同一主机发送多个求，底层的 TCP 连接将会被重用，从而带来显著的性能提升session()中添加cookieimport requests# 字典格式cookie添加方法r = requests.session()cookie = {"cookie1": "...
python requests session_python之requests模块-session
weixin_39845206的博客
12-06 232
http协议本身是无状态的，为了让请求之间保持状态，有了session和cookie机制。requests也提供了相应的方法去操纵它们。requests中的session对象能够让我们跨http请求保持某些参数，即让同一个session对象发送的请求头携带某个指定的参数。当然，最常见的应用是它可以让cookie保持在后续的一串请求中。下面，通过官方文档中的示例来了解如何使用它。importrequ...
python requests.Session()的使用
分享博主日常学习和使用的一些技术
12-17 666
你可以把Session理解成为它内部提供了一系列方法，用来存储状态。这里所说的状态，其实大部分情况下指的就是cookies。比如使用浏览器时候，你在一个标签页内登陆了，另一个标签页其实就可以读取cookies了，从而另一个标签页内也有登录状态。这个requests session就是这样的。通过 requests Session 可以共享或者追踪各个请求之间的状态和信息。
Python接口自动化-requests.session保存token
weixin_44486545的博客
07-20 2554
在进行接口测试的时候，我们会调用多个接口发出多个请求，在这些请求中有时候需要保持一些共用的数据，例如cookies、tokend等等信息。 在进行接口测试的时候，我们会调用多个接口发出多个请求，在这些请求中有时候需要保持一些共用的数据，例如token信息。 import requests r=requests.session() url='http://49.235.92.12:6007/api/v1/login' body={ "username": "admin", "password"
python requests session_python接口自动化中requests.session
weixin_35203997的博客
02-19 3085
一、作用：在使用Python做接口自动化测试过程中，我们会调用多个接口发出多个请求，在这些请求中有时候需要保持一些共用的数据，例如cookies信息。另外，大部分接口调用往往需要先进行登录操作，然后才能对相关的接口进行操作。针对以上情形，通常我们会有两种做法1、每次接口请求后获取到响应中的cookie，然后接下来的所有请求带上这个cookie2、使用requests的session会话对象今天分享...
python接口测试之requests（session，cookie）
weixin_43579528的博客
02-21 1220
session和cookie
python学习——爬虫之session请求处理cookie
hzk45679的博客
08-31 968
这里表单数据在负载栏。
Python爬虫之requests库的使用
04-03
<think>好的，我现在需要帮助用户学习如何使用Python的requests库进行网络请求。首先，用户明确提到想要一个使用教程和示例，所以我应该从基础开始，逐步介绍常用的HTTP方法，比如GET和POST，以及错误处理和高级功能，比如设置请求头和代理。 首先，用户的问题是关于requests库的使用，所以我需要确保覆盖主要的请求类型。根据引用[4]，GET请求可以通过params参数传递URL参数，这应该作为第一个示例。然后，POST请求通常需要传递数据，比如表单或JSON，这也是常见的用例。 接下来，错误处理部分，引用[1]提到了Requests可以抛出异常，比如HTTPError和Timeout，所以需要在教程中加入try-except块来处理这些异常，确保用户知道如何捕获和处理常见的网络问题。 另外，用户提供的引用[3]提到了代理请求，这部分可以作为高级用法来介绍。安装requests库之后，设置代理的方法需要详细说明，比如在get方法中传递proxies参数。 然后，请求头的设置也很重要，引用[4]中提到了在GET请求中设置请求头的例子，所以这里应该包括如何自定义User-Agent或其他头部信息。 关于安装部分，用户可能已经知道，但为了完整性，还是应该简要提及，如引用[3]所示，使用pip安装requests库。 在组织内容时，需要按照逻辑顺序，从安装到基本请求，再到高级功能，最后是错误处理。每个部分都应有代码示例，并保持代码简洁，符合用户提供的示例中的格式，比如使用代码块，并确保语法正确。 同时，用户要求生成相关问题，可能需要包括性能优化、会话对象的使用、文件上传、证书验证等，这些问题可以帮助用户进一步探索。 最后，检查所有引用是否正确对应，比如引用[1]关于异常处理，引用[3]关于代理，引用[4]关于GET参数和请求头。确保引用标记正确，没有遗漏或错误。 现在需要确保回答结构清晰，分步骤讲解，每个部分都有示例代码，并且自然融入引用。同时，问题部分需要涵盖用户可能感兴趣的后续主题，比如会话管理、文件上传、身份验证等。</think>### Python Requests库使用教程 #### 一、安装与基础使用 1. **安装库** 使用pip安装（如引用[3]所述）： ```bash pip install requests ``` 2. **发送GET请求** 通过`params`传递URL参数（如引用[4]示例）： ```python import requests params = {'q': 'requests+language:python'} response = requests.get('https://api.github.com/search/repositories', params=params) print(response.status_code) # 输出状态码 print(response.json()) # 解析JSON响应 ``` 3. **自定义请求头** 添加`headers`参数模拟浏览器访问： ```python headers = {'User-Agent': 'Mozilla/5.0'} response = requests.get('https://example.com', headers=headers) ``` --- #### 二、POST请求与数据提交 1. **提交表单数据** 使用`data`参数发送表单： ```python data = {'username': 'admin', 'password': 'test'} response = requests.post('https://httpbin.org/post', data=data) ``` 2. **发送JSON数据** 使用`json`参数自动序列化： ```python json_data = {'key': 'value'} response = requests.post('https://api.example.com/submit', json=json_data) ``` --- #### 三、错误处理（如引用[1]示例） ```python from requests.exceptions import HTTPError, Timeout try: response = requests.get('https://api.github.com', timeout=1) response.raise_for_status() # 检查HTTP错误 except HTTPError as http_err: print(f'HTTP错误: {http_err}') except Timeout as timeout_err: print(f'超时错误: {timeout_err}') except Exception as err: print(f'其他错误: {err}') ``` --- #### 四、高级功能 1. **代理设置**（如引用[3]所述） 通过`proxies`参数配置代理： ```python proxies = {'http': 'http://10.10.1.10:3128', 'https': 'http://10.10.1.10:1080'} response = requests.get('https://example.com', proxies=proxies) ``` 2. **会话保持** 使用`Session`对象复用TCP连接： ```python with requests.Session() as s: s.get('https://example.com/login') # 保持Cookies response = s.get('https://example.com/dashboard') ``` ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

haeasringnar

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值