- 博客(1)
- 收藏
- 关注
RSS订阅原创 拉勾网职位爬取--初窥反爬
常见的反爬虫策略汇总 对请求头进行检查 User-Agent识别 解决方法：构造一个User-Agent列表，每次向headers中随机注入一个User-Agent agent = ['Mozilla/5.0 (Macintosh; U; Intel Mac OS X 10_6_8; en-us) AppleWebKit/534.50 (KHTML, like Gecko) Version/5.1 Safari/534.50', 'Mozilla/5.0 (Windows; U; Windo
2020-10-26 11:19:58
357
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人