sinat_21748377的博客

一、背景介绍近期产生需求，需要批量重复获取微信小程序数据助手的部分数据，减少重复工作，提高效率。二、环境准备主要逻辑：charles抓包，分析，爬取，数据存储环境配置：pc-win10/移动-iphone/软件-charles* Charles配置与使用，参考的此条链接：https://blog.youkuaiyun.com/HeyShHeyou/article/details/90045204*charles注意事项：官网安装包下载可能会很慢，可以去找找其他下载资源 软件每半小时会断开链

from selenium import webdriverfrom time import sleeplist=[]chromedriver = r'C:\Users\lusy\AppData\Local\Programs\Python\Python36-32\chromedriver.exe'driver = webdriver.Chrome(chromedriver)chrome_opts = webdriver.ChromeOptions()chrome_opts.add_argume

import requestsfrom bs4 import BeautifulSoupfrom fake_useragent import UserAgentdef url_get(url,head): res = requests.get(url, headers=head) print(res.status_code) html = res.text return htmldef html_get(html): soup = BeautifulS