XnCSD的博客

python 爬虫获取网页 html 内容以及下载附件的方法python 爬虫获取网页 html 内容的两种方法: 获取静态网页和使用浏览器获取动态内容。from urllib.request import urlopenfrom urllib import requestfrom bs4 import BeautifulSoupfrom urllib.request import ur...

Python 爬虫：requests 和 selenium 伪装 headers 和代理应对反爬机制目录1、requests 伪装 headers发送请求2、selenium 模拟使用浏览器伪装headers3、requests 使用 ip代理发送请求4、selenium webdriver 使用代理ip在编写爬虫的过程中，有些网站会设置反爬机制，对于非浏览器的访问拒...