1.方法简介
python3中从下载的网页中抓取数据主要的方法有三种,分别是正则表达式、BeautifulSoup、Lxml。三种方法各有特点。
正则表达式,又称规则表达式。(英语:Regular Expression,在代码中常简写为regex、regexp或RE),计算机科学的一个概念。正则表通常被用来检索、替换那些符合某个模式(规则)的文本。
BeautifulSoup是用Python写的一个HTML/XML的解析器,它可以很好的处理不规范标记并生成剖析树(parse tree)。 它提供简单又常用的导航(navigating),搜索以及修改剖析树的操作。它可以大大节省你的编程时间。(安装教程传送门)
Lxml是基于libxml2这一XML 解析库的Python 封装。该模块使用C语言编写, 解析速度比BeautifulSoup 更快, 不过安装过程也更为复杂。
2.性能对比code
import time
import re
from bs4 import BeautifulSoup
import lxml.html
from urllib import request