Python网络编程——HTTP协议学习笔记

最新推荐文章于 2024-09-22 12:26:25 发布
最新推荐文章于 2024-09-22 12:26:25 发布
阅读量2.5k 收藏 9
点赞数 2
分类专栏： # PythonWeb 文章标签： http 网络 python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_44653420/article/details/122844287
版权
本文介绍了HTTP协议的基础概念、作用及浏览器通信过程，详细剖析了GET和POST请求报文，并解读了HTTP响应报文的构成。深入理解URL结构，结合谷歌开发者工具实践查看HTTP通信细节。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

HTTP协议学习笔记

HTTP协议概述

一、HTTP协议的介绍

  • HTTP协议的全称是(HyperText Transfer Protocol),翻译过来就是超文本传输协议。

  • 超文本是超级文本的缩写，是指超越文本限制或者超链接，比如：图片、视频、音乐、超链接等等都属于超文本。

  • HTTP协议的制作者是蒂姆.伯纳斯.李，HTTP协议设计之前目的是传输网页数据的，现在允许传输任意类型的数据。

  • 传输HTTP协议格式的数据是基于TCP传输协议的，发送数据之前需要先建立连接。

二、HTTP协议的作用

它规定了浏览器和web服务器通信数据的格式，也就是说浏览器和web服务器通信需要使用http协议

三、浏览器访问web服务器的通信过程

在这里插入图片描述

四、小结

  • HTTP协议是一个超文本传输协议
  • HTTP协议是一个基于TCP传输协议传输数据的
  • HTTP协议规定了浏览器和web服务器通信数据的格式，所有超文本数据必须封装成指定的http数据格式

URL

一、URL的概念

URL的英文全称是（Uniform Resource Locator），表达的意思是统一资源定位符，通俗理解就是网络资源地址，也就是我们常说的网址。

二、URL的组成

在这里插入图片描述

  • 协议部分：http://、https://、ftp://
  • 域名部分：news.163.com
  • 资源路径部分: /18/1122/10/E178J2O4000189FH.html

https默认端口号443,http默认80端口

域名：就是IP地址的别名，他是用点进行分割使用英文字母和数字组成的名字，使用域名的目的就是方便记忆某台主机的IP地址。

在这里插入图片描述

查询参数部分：?page = 1 & count = 10

参数部分：

  • ？后面的page表示第一个参数，后面的参数都使用&进行连接

三、小结

  • URL就是网络资源的地址，简称网址，通过URL能够找到网络中对应的资源数据。

  • URL组成部分

    • 协议部分
    • 域名部分
    • 资源路径部分
    • 查询参数部分

查看HTTP协议的通信过程

一、谷歌浏览器开发者工具

首先需要安装Google Chrome浏览器，然后Windows和Linux平台按F12调出开发者工具。

在这里插入图片描述

开发者工具的标签选项说明：

  • 元素（ELements）:用于查看或者修改HTML标签
  • 控制台(Console): 执行js代码
  • 源代码（Sources）:查看静态资源文件，断点调试js代码
  • 网络(Network):查看http协议的通信过程

输入www.baidu.com,可以看到浏览器发出54个请求，下面的每一行都是一个请求
在这里插入图片描述

查看elements，是网页的html文件
在这里插入图片描述

console是控制台 可以执行js代码。
在这里插入图片描述

source就是网页使用的静态资源：比如图片，jss,css
在这里插入图片描述

NetWork描述https的通信过程
在这里插入图片描述

headers是https协议的主要信息：
在这里插入图片描述

可以清楚的看到https协议的默认端口号就是443，请求方式是get。

Request URL 请求头信息，
在这里插入图片描述

view source是查看浏览器查看发送给web服务器的原始数据，view parsed是查看浏览器发送给web服务器解析过的数据。

Reponse代表响应体，是服务器发送给浏览器的数据，浏览器使用这些数据渲染成百度的网页
在这里插入图片描述

二、小结

  • 谷歌浏览器的开发者工具是查看http协议的通信过程利器，通过Network标签选项就可以查看每一次的请求和响应的过程，调出开发者工具的通用方法是网页右击选择检查。

  • 开发者工具的Headers选项总共有三个部分组成：

    • General:主要信息
    • Response Headers:响应头
    • Request Headers:请求头

  • Response选项是查看响应体信息的

HTTP请求报文

一、HTTP请求报文介绍

HTTP最常见的请求报文有两种：

  1. Get方式的请求报文
  2. Post方式的请求报文

说明：

  • Get：获取web服务器数据
  • Post：向web服务器提交数据（常用于用户登录）

二、HTTP GET 请求报文分析

请求报文头部信息（每一项信息之间都有/r/n 进行分割）


--http get请求报文
---请求行---
GET / HTTP/1.1   => 请求方法（方式）  请求的资源路径（/ 代表主页） http协议的版本

---请求头---
Host: www.baidu.com  => 服务器的主机ip地址和端口号，提示如果看不到端口号，默认是80
Connection: keep-alive  => 和服务端程序保持长连接，当客户端和服务端有一段时间没有进行通信，那么服务器程序会主动向客户端断开连接，这个时间大概是三到五分钟

Cache-Control: max-age=0
sec-ch-ua: " Not;A Brand";v="99", "Google Chrome";v="97", "Chromium";v="97"
sec-ch-ua-mobile: ?0
sec-ch-ua-platform: "Windows"
Upgrade-Insecure-Requests: 1  => 让客户请求不安全请求，以后要使用https
User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/97.0.4692.99 Safari/537.36  => 客户端代理，客户端程序的名称
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9  => 告诉服务端程序可以接受的数据类型
Sec-Fetch-Site: none
Sec-Fetch-Mode: navigate
Sec-Fetch-User: ?1
Sec-Fetch-Dest: document
Accept-Encoding: gzip, deflate, br   => 告诉服务端程序 支持的压缩算法
Accept-Language: zh-CN,zh;q=0.9   => 告诉服务端程序支持的语言
Cookie: BIDUPSID=596549FEBD7BB0978B443F126131E34C; PSTM=1641627619; BAIDUID=596549FEBD7BB09722355A51D87326B1:FG=1; BD_UPN=12314753; __yjs_duid=1_92f5af7da5389645f0f08d551708100e1641810903990; BDORZ=B490B5EBF6F3CD402E515D22BCDA1598; BDUSS=FFsdUNBT1dpVTlwcnlFdll2cm5wQ3FQM2gtNlAwLTZXREVuNTVRMGNHWVcwaWxpSVFBQUFBJCQAAAAAAAAAAAEAAAD8pXaWaGZneWR4RgAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAABZFAmIWRQJiM; BDUSS_BFESS=FFsdUNBT1dpVTlwcnlFdll2cm5wQ3FQM2gtNlAwLTZXREVuNTVRMGNHWVcwaWxpSVFBQUFBJCQAAAAAAAAAAAEAAAD8pXaWaGZneWR4RgAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAABZFAmIWRQJiM; baikeVisitId=2dd394e3-b4e0-4ffd-baef-2e398b5b89af; BD_HOME=1; H_PS_PSSID=35104_35776_34584_35490_35541_35316_26350_35744; sug=3; sugstore=0; ORIGIN=0; bdime=0; BA_HECTOR=2500a52l802gag0gaa1h06osu0r  => 客户端用户身份的标识

---最后还有一个空行---

三、小结

  • 一个HTTP请求报文可以由请求行、请求头、空行和请求体四个部分组成。

  • 请求行是由三个部分组成：

    • 请求方式
    • 请求资源路径 （一般是主页index.html）
    • HTTP协议版本

  • GET方式的请求报文没有请求体，只有请求行、请求头、空行组成

  • POST方式的请求报文可以有请求行、请求头、空行、请求体四部分组成，注意：post方式可以允许没有请求体，但是这种格式很少见

在这里插入图片描述

HTTP响应报文

一、HTTP响应报文分析

---响应行（状态行）---
HTTP/1.1 200 OK   => http协议版本 状态码 状态描述

---响应头---
Bdpagetype: 2
Bdqid: 0x9716a8f60002c67c
Cache-Control: private
Connection: keep-alive  => 和客户端保持长连接
Content-Encoding: gzip
Content-Type: text/html;charset=utf-8   => 服务器发送给浏览器的内容类型以及编码格式
Date: Wed, 09 Feb 2022 07:53:25 GMT  => 服务器的时间
Expires: Wed, 09 Feb 2022 07:53:25 GMT
Server: BWS/1.1   =>  服务器的名称
Set-Cookie: BDSVRTM=124; path=/
Set-Cookie: BD_HOME=1; path=/
Set-Cookie: H_PS_PSSID=35104_35776_34584_35490_35541_35316_26350_35744; path=/; domain=.baidu.com
Strict-Transport-Security: max-age=172800
Traceid: 1644393205025555405810887074923730355836
X-Frame-Options: sameorigin
X-Ua-Compatible: IE=Edge,chrome=1
Transfer-Encoding: chunked   => 服务器发送给客户端程序（浏览器）的数据不确定数据长度，数据发送结束的接受标识：0\r\n ,Content-Length:200字节 ，服务器发送给客户端程序的数据确定长度，这两个内容长度选项二者选其一

---空行---
\r\n

---响应体：就是真正给浏览器解析的数据---
网页数据

在这里插入图片描述

二、小结

  • 一个HTTP响应报文是由响应行，响应头、空行和响应体四个部分组成
  • 响应行是由三部分组成：HTTP协议版本 状态码 状态描述，最常见的状态码就是200（响应成功）
Python HTTP库全解析
记录点滴
04-10 803
【代码】Python HTTP库全解析。
Python高级语法——网络编程——学习心得笔记
Python美丽星球--微信(Felixzfb)
01-15 382
Python高级语法——网络编程——学习心得笔记 1. 网络编程 网络协议：一套规则 网络模型 七层模型 四层模型-实际应用 每一层都有相应的协议负责交换信息或者协同工作 TCP/IP 协议 IP地址：负责在网络上唯一定位一个机器 IP地址分为ABCDE类 由四个数字段组成，每个数字段的取值0-255 192.168.xxx.xxx 局域网IP 127.0.0.1 本机 ...
python网络编程之http协议-数据请求
12-21
编写程序实现新闻网页数据的请求和获取数据的保存： 进入一个学校的新闻首页，分析各不同新闻网页url之间的区别和联系，并根据得到的规律通过程序生成所要请求的网页的url（前30个页面）。 使用requests库通过http协议的get方法向web server 请求30个页面的数据，要求：（1）30个请求分别由5个线程实现，每个线程负责6个url页面的请求；（2）每个线程中的不同页面请求的时间间隔是3秒；（3）当线程中成功获取某一个新闻网页数据后，需要在屏幕上输出相应的状态信息（如。。。网页请求成功） 对于每个获取的网页数据，分别将其写入到本地相应的html文件中，要求本地网页数据文件的文件名为pageXXX（XXX为请求页面的编号） 对生成的文件进行验证，如果出现中文乱码的问题，请对可能的原因进行分析，并给出可行的解决方案。
Django 必会面试题总结
热门推荐
QQ群166477105Python技术群
01-01 1万+
目录1 列举Http请求中常见的请求方式2 谈谈你对HTTP协议的认识。1.1 长连接3 简述MVC模式和MVT模式4 简述Django请求生命周期5 简述什么是FBV和CBV6 谈一谈你对ORM的理解7 rest_framework 认证组件的流程8 什么是中间件并简述其作用9 django 中间件生命周期10 django中怎么写原生SQL11 如何使用django orm批量创建数据&nbs...
Python网络编程（http协议，IO多路复用、select内核监听）
ParisGabriel
08-09 549
前言： 什么是IO？ 分为IO设备和IO接口两个部分 如Linux系统，I/O操作可以有多种方式 比如DIO(DirectI/O) AIO(AsynchronousI/O异步I/O) Memory-MappedI/O(内存映设I/O)等... 不同的I/O方式有不同的实现方式和性能，在不同的应用中可以按情况选择不同的I/O方式。     补充昨天HTTP： from sock...
python http
kevin_Luan的专栏
09-27 1168
python http 请求 #!/usr/bin/env python #coding=utf-8 #设置python编码 from operator import itemgetter import sys import urllib #实现了http和https的客户端协议 import urllib2 import httplib class HttpUtil: def __ini
非常简单的Python HTTP服务
LOSTBOY's Blog
10-16 445
转自http://coolshell.cn/?p=1480 如果你急需一个简单的Web Server，但你又不想去下载并安装那些复杂的HTTP服务程序，比如：Apache，ISS等。那么， Python 可能帮助你。使用Python可以完成一个简单的内建 HTTP 服务器。于是，你可以把你的目录和文件都以HTTP的方式展示出来。佻只需要干一件事情，那就是安装一个Python。 实际上来...
【D.SUN的笔记】Python编程基础——快速学习
12-22
【Python编程基础——快速学习】 Python是一种高级编程语言，以其简洁明了的语法和广泛的库支持而受到青睐。本文将概述Python的基础知识，包括下载、安装、交互式解释器的使用，以及基本的编程概念。 1. **Python...
[学习笔记]Python学习2——Python环境
m0_61009360的博客
08-15 1265
venv 是Python自带的虚拟环境管理工具，适用于 Python 3.3 及以上版本，其简单且轻量，只需使用 Python 的自带模块就能创建和管理虚拟环境，然而，venv创建的虚拟环境只能使用当前的Python 解释器版本，若要创建不同版本Python的虚拟环境，就要事先在计算机中安装对应版本的Python，并在使用创建虚拟环境的指令时使用对应版本Python，而且对于较低版本的Python则不便进行虚拟环境的构建；虚拟环境允许每个项目使用独立的环境，避免全局环境中的库冲突，保持项目之间的独立性。
Python学习笔记——用户登录测试
12-22
在本篇《Python学习笔记——用户登录测试》中，我们将探讨如何使用Python语言实现一个简单的用户登录系统。这个系统能够接收用户的账号和密码输入，并进行有效性验证。通过这个实例，初学者可以了解到基础的Python...
python网络编程之http协议-数据提交
12-21
编写程序实现通过有道或百度翻译url对用户输入数据进行翻译： 进入有道翻译或者百度翻译页面，找出页面向服务器提交待翻译数据使用的url； 使用浏览器分析工具分析相关需要提交的数据字段以及值，主要包括：（1）待翻译词语或句子使用的字段数据；（2）待翻译数据使用的语言；（3）翻译结果使用的语言；（4）返回的翻译结果使用的数据类型；（5）其他需要的数据字段 获取使用requests库post方法提交数据所需其他数据，如headers中使用的数据信息（如User-Agent，cookies等） 实现完整的程序，并运行程序，对输入的待翻译的内容的返回结果进行验证；如果出现返回为空值等问题，请对可能的原因进行分析，并给出可行的解决方案。
Python 访问http, https请求
07-30
NULL 博文链接：https://zl198751.iteye.com/blog/844594
超简单的Python HTTP服务
01-21
超如果你急需一个简单的Web Server，但你又不想去下载并安装那些复杂的HTTP服务程序，比如：Apache，ISS等。那么， Python 可能帮助你。使用Python可以完成一个简单的内建 HTTP 服务器。于是，你可以把你的目录和文件都以HTTP的方式展示出来。佻只需要干一件事情，那就是安装一个Python。 实际上来说，这是一个可以用来共享文件的非常有用的方式。实现一个微型的HTTP服务程序来说是很简单的事情，在Python下，只需要一个命令行。下面是这个命令行：（假设我们需要共享我们的目录 /home/haoel 而IP地址是192.168.1.1） $ cd /home/ha
python(网络编程-HTTP协议)
weixin_38477351的博客
06-14 1489
HTTP协议 一、HTTP请求的组成 1、状态行 2、请求体 3、消息主体 二、HTTP响应的组成 1、状态行 2、响应头 3、响应正文 三、HTTP常见状态码 1、1**信息。服务器收到请求，需要请求者继续执行操作 状态码 状态码英文名称 中文描述 100 ...
python 网络编程学习 http基本方法
hexiaodouaipiqiu的博客
09-19 462
http 基本方法
Python网络编程 Http
weixin_30306905的博客
05-02 104
"Foundations of Python Network Programming" written by John GoerzenPython 中有urllib2和urllib两个模块来处理HTTP协议GET方法把表单数据编码至URL。在请求页面之后，加上一个？，接着是表单数据。每个键和值对被&分隔。http://cn.bing.com/search?q=python+socket&...
Python学习日志——网络编程（四）HTTP协议
weixin_42613087的博客
10-20 187
一. HTTP协议介绍 HTTP 协议(HyperText Transfer Protocol)，即超文本传输协议。它规定了浏览器和 Web 服务器通信数据的格式。 超文本是超级文本的缩写，是指超越文本限制或者超链接，比如:图片、音乐、视频、超链接等等都属于超文本。 传输 HTTP 协议格式的数据是基于 TCP 传输协议的，发送数据之前需要先建立连接。 二. URL 介绍 URL(Uniform Resoure Locator)统一资源定位符，就是网络资源地址，即网址。 组成 https://blog
Python 中的 HTTP 编程入门，如何使用 Requests 请求网络
最新发布
chusheng1840的博客
09-22 1807
HTTP（HyperText Transfer Protocol）是一个无状态的应用层协议，主要用于客户端和服务器之间的数据传输。请求-响应模型：客户端发送请求，服务器处理请求并返回响应。无状态：每个请求都是独立的，服务器不会记住前一个请求的状态。支持多种数据格式：HTTP 可以传输文本、图像、视频等多种类型的数据。HTTP 编程是现代网络应用开发的重要基础，Python 提供了强大的库和框架，使得与 HTTP 进行交互变得非常简单。
Python编程入门教程——王纯业笔记
"王纯业的Python学习笔记.pdf" 这是一份由王纯业编写的Python学习笔记，适合初学者入门。...这份笔记以清晰的章节结构和实例演示，帮助读者逐步掌握Python编程基础，是学习Python语言的良好参考资料。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

少写代码少看论文多多睡觉

求打赏，求关注，求点赞

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值