python爬虫（二）get、post请求及乱码的解决方法

最新推荐文章于 2024-04-15 17:34:13 发布

原创

最新推荐文章于 2024-04-15 17:34:13 发布 · 1.9k 阅读

6 ·

CC 4.0 BY-SA版权

文章标签：

#python #乱码

本文介绍了Python爬虫中requests模块的使用，包括导入模块、发送GET和POST请求以及如何处理响应内容。特别是针对get请求的详细参数解析，同时讲解了在遇到乱码问题时的解决策略。

requests模块

一.使用步骤：

导包——import requests
确定基础url
例如：base_url=‘https://www.baidu.com’
发送请求，获取响应
response = requests.get(base_url)
处理响应内容

二.requests.get() ----get请求方法参数详解

1.requests.get(
	url=请求url，
	headers=请求头字典，
	params=请求参数子弹，
	timeout=超时时长，
	)----- 返回一个response对象
2.response对象的属性
	服务器响应包含：状态行（协议，状态码）、响应头、空行、响应正文。
	（1）响应正文：
		字符串格式：response.text
		bytes类型：response.content
	（2）状态码：response.status_code
	（3）响应头：response.headers（字典）
				response.headers('cookie')
	（4）响应正文的编码：respons