菜鸟成长日记

思路1. 分析目标网页，确定爬取的 url 路径2. 发送请求 requests 模拟浏览器发送请求，获取响应数据3. 解析数据4. 保存数据使用谷歌浏览器打开王者荣耀官网 找到英雄资料 调出检查工具 ...

用自己的请求头 headers (我的不可用，已做过处理)如何找到自己的 headers ?F12 或者 开发者工具 找到 Network 在 Name 这一栏点击一个文件 找到右侧的 Request Headers 向下滑动找到 User-Agent 即为自己的 header 再找不到就百度！！！import urllib.requesturl = 'htt...

import urllib.request# 在执行过程中，会产生缓存urllib.request.urlretrieve('http://www.mingxing.com/',filename=r'D:\pypypy\space\18\1.txt')# 清除缓存urllib.request.urlcleanup()print('已清除')...

import urllib.requestresponse = urllib.request.urlopen('https://www.baidu.com/')data = response.readlines()print(data)# 返回当前环境有关信息print(response.info())# 返回状态码 200成功处理了请求print(response.get...