luobofengl的博客

BeautifulSoup4 bs4简介 bs4的使用 bs4对象的种类 遍历字节点 遍历树遍历父节点 搜索树 findall()方法 find()方法 修改文档树

xpath xpath简介 xpath-helper的使用 element对象 节点之间的关系 选取节点 豆瓣练习

requests库 源码分析 pip install requests 练习 两种，第二种是装饰器 class Person: def __init__(self,name): self._name = name def name(self): return self._name p = Person('葫芦娃') print(p.name(...

正则表达式练习 爬取小说 获取每部小说的url import requests import re # 1.我要拿到纯爱小说这个分类所对应的第一页的小说内容 def get_novel_list(): response = requests.get('http://www.quanshuwang.com/list/3_1.html') response.encoding = 'g...

正则表达式 正则表达式简介 正则表达式就是对字符串操作的一种逻辑公式，就是用事先定义好的一些特定的字符以及这些特定字符的组合，组成一个有规则的字符串。这个字符串用来表达对字符串一种过滤的逻辑。 import re pattern = 'python' str = 'python and java' # 第一个参数pattern 正则表达式 模板 # 第二个参数str 表示要匹配的字符串 # 第三个...

爬虫简介 通讯协议 通讯协议 国际组织定义了通信用协议TCP/IP 所谓协议就是指计算机通信网络中两台计算机进行通讯必须共同遵守的规则或规定。 HTTP协议又叫做超文本传输(就是一种通讯协议) 网络模型 网络模型 https = http + ssl https是以http以安全为目的的传输通道。简单理解https就是http的安全版 get和post方法 请求方法 GET 从指定的资源...