python爬虫(十二)-------------------cookie

ROOOOOOM

已于 2023-12-21 14:37:44 修改

阅读量357

点赞数

CC 4.0 BY-SA版权

分类专栏： Data acquisition reference python爬虫文章标签： python 爬虫开发语言

于 2019-04-03 02:35:46 首次发布

本文链接：https://blog.youkuaiyun.com/qq_41228218/article/details/88985887

python爬虫同时被 2 个专栏收录

48 篇文章 ¥9.90 ¥99.00

订阅专栏

Data acquisition reference

52 篇文章

订阅专栏

本文介绍了Python爬虫中如何使用Cookie来模拟浏览器行为，包括Cookie的作用、如何设置User-Agent和Referer头信息，以及一个使用Cookie进行爬虫的简单示例。通过使用Cookie，爬虫可以合法访问网站，避免频繁请求导致的封禁风险，并实现登录状态维持。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import requests
#用cookie代替表单提交,就不存在验证码的问题,会失效但有效期很长,服务器根据cookie的值计算出你是谁

headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/44.0.2403.157 Safari/537.36'}
cookies = {'cookie': 'bid=a3MhK2YEpZw; ll="108296"; ps=y; ue="t.t.panda@hotmail.com"; _pk_ref.100001.8cb4=%5B%22%22%2C%22%22%2C1482650884%2C%22https%3A%2F%2Fwww.so.com%2Fs%3Fie%3Dutf-8%26shb%3D1%26src%3Dhome_so.com%26q%3Dpython%2B%25E8%25B1%2586%25E7%2593%25A3%25E6%25BA%2590%22%5D; _gat_UA-7019765-1=1; ap=1; __utmt=1; _ga=GA1.2.1329310863.1477654711; dbcl2="2625855:/V89oXS4WD4"; ck=EePo; push_noty_num=0; push_doumail_num=0; _pk_id.100001.8cb4=40c3cee75022c8e1.1477654710.8.1482652441.1482639716.; _pk_ses.100001.8cb4=*; __utma=30149280.1329310863.1477654711.1482

了解本专栏