Python基础爬虫获取页面信息并保存到本地------Python

from urllib.request import urlopen
import sys
sys.stdout.reconfigure(encoding='utf-8')

resp = urlopen("https://www.baidu.com")

with open("baidu.html", mode="w",encoding="utf-8") as f:
    f.write(resp.read().decode("utf-8"))

from urllib.request import urlopen

import sys

sys.stdout.reconfigure(encoding='utf-8')

resp = urlopen("https://www.baidu.com")

with open("baidu.html", mode="w",encoding="utf-8") as f:

    f.write(resp.read().decode("utf-8"))

Cookie
User-Agent检测,主要是携带请求用户客户端的信息
复习知识:
请求行,请求方式,请求URL地址和协议
请求头,放一些服务器使用的附加信息
请求体,一般放一些请求参数
状态行,协议状态码
响应头,客户端的附加信息
响应体,服务器返回的客户端内容

Cookie
User-Agent检测,主要是携带请求用户客户端的信息
复习知识:
请求行,请求方式,请求URL地址和协议
请求头,放一些服务器使用的附加信息
请求体,一般放一些请求参数
状态行,协议状态码
响应头,客户端的附加信息
响应体,服务器返回的客户端内容

User-Agent:请求载体的身份标识
Referer:防盗链,请求是哪个页面过来的
cookie:本地字符串数据信息,用户登录信息,用于反爬虫的token
响应头的反爬字段

User-Agent:请求载体的身份标识
Referer:防盗链,请求是哪个页面过来的
cookie:本地字符串数据信息,用户登录信息,用于反爬虫的token
响应头的反爬字段