本文介绍了Python爬虫中的几个高级技巧，包括使用session处理请求，利用urlencode、urldecode和quote进行URL编码解码，理解if语句检查变量的有效性，定义函数时的变量作用域，以及yield关键字在生成迭代器中的应用。
该博文会持续更新
session()
session.headers.update()
#注意，小括号中是字典的形式
urlencode()、urldecode()、quote()
urlencode函数，可以把key-value这样的键值对转换成我们想要的格式，返回的是a=1&b=2这样的字符串，比如：
import urllib.parse
values={}
values[‘username’]=‘01张三’
values[‘password’]=‘df123?’
url=“http://www.baidu.com”
data=urllib.parse.urlencode(values)
print(data)
结果如下：
username=01%E5%BC%A0%E4%B8%89&password=df123%
最低0.47元/天 解锁文章
扫一扫
2496
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
