python爬虫|处理不信任SSL证书

本文介绍了Python爬虫中处理不信任SSL证书的方法,以及requests模块的基础使用,包括get和post请求、设置代理、操作cookie和session。同时,解释了SSL证书的作用和重要性。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1.request模块安装
(1)cmd中pip install requests
(2)开发者工具

  • pycharm里面的Terminal安装
  • pycharm的file-setting-project-±输入要安装的包

    2.requests模块
    2.1常用方法
    requests.get(网址)方法
    requests.get(url,headers=headers)
import requests
#发生请求,获取响应
headers = {
   
         'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.88 Safari/537.36','Cookie':'BIDUPSID=4FA733ACE6D4F90A52D99F5F363CD85A; PSTM=1576929032; sug=3; sugstore=0; ORIGIN=0; bdime=0; BAIDUID=4FA733ACE6D4F90A83BE743C46630339:SL=0:NR=10:FG=1; BD_UPN=12314753; BDUSS=VFPUlFGU0RER1ZtcDdTR1lPek5vcEdZcUMtRFNNUkN3VHZTb35Cb1hRR0duOHRlRVFBQUFBJCQAAAAAAAAAAAEAAADzvSajSjdnaGgAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAIYSpF6GEqReR; MCITY=-158%3A; BDORZ=B490B5EBF6F3CD402E515D22BCDA1598; delPer=0; BD_CK_SAM=1; BD_HOME=1; BDRCVFR[feWj1Vr5u3D]=I67x6TjHwwYf0; H_PS_PSSID=1428_31123_21106_31427_31342_30904_31270_31463_30823_31163; PSINO=6; H_PS_645EC=a7848f0JB9WheG1sOVfeKMjHJlUyiwlS1wRIJBkCDEeiFQrxo2RluKd%2B1xs'
     }
url = 'https://www.baidu.com/s?'        #百度网址
response=requests.get(url,headers=headers)
print(response)   #结果为<Response [200]>

2.2响应对象的方法
request.get(url,params=wd,headers=headers)
response.content.decode(encoding=‘utf-8’)

# 发送请求
# https://www.baidu.com/s?wd=%E4%B8%AD%E5%9B%BD

wd = {
   'wd':'中国'}
response = requests.get('https://www.baidu.com/s?',params=wd
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值