洛少的专栏

Python 抓取网页数据乱码时, 设置编码 headers = {'referer': referer, 'user-agent': user_agent} r = requests.get(url, headers=headers, proxies=proxies) # print(r.encoding) # gb2312 r.encoding = 'GBK'...

Python 解析html BeautifulSoup ,使用选择器根据class获取数据 rand_ip = 'rand ip' proxies = {"https": rand_ip, } referer = "https://sz.meituan.com/xuexipeixun/" + category_id + "/" url = "https://sz...

1 配置fiddlerFiddler是一个http协议调试代理工具，它能够记录并检查所有你的电脑和互联网之间的http通讯，设置断点，查看所有的“进出”Fiddler的数据（指cookie,html,js,css等文件）。 Fiddler 要比其他的网络调试器要更加简单，因为它不仅仅暴露http通讯还提供了一个用户友好的格式。由于手机app的通讯请求基本都是https的, 所以我们现在先在fi...