python 模块-使用HTMLParser 解析html

最新推荐文章于 2025-03-10 07:00:00 发布

原创最新推荐文章于 2025-03-10 07:00:00 发布 · 3.2k 阅读

1 ·

CC 4.0 BY-SA版权

python 专栏收录该内容

21 篇文章

订阅专栏

本文介绍了Python中使用HTMLParser解析HTML的方法，通过继承HTMLParser类并重写handle_starttag、handle_endtag和handle_data等函数，实现对HTML文档的解析。示例展示了如何解析开始标签、结束标签和标签内的数据。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

python里面的HTMLParser解析html，跟c++和其他语言的html库解析不同，是使用类继承的方式。

通过重实现HTMLParser类的几个函数，来达到解析html的目的。

主要的重载的函数有：

handle_starttag #开始标签的解析

handle_endtag #结束标签的解析

handle_data #标签内数据的解析

下面通过一个例子看学习下具体的使用（这个例子是python主页上的一个例子）：
from html.parser import HTMLParser

class MyHTMLParser(HTMLParser):
    def handle_starttag(self, tag, attrs):
        print("Encountered a start tag:", tag)
    def handle_endtag(self, tag):
        print("Encountered an end tag :", tag)
    def handle_data(self, data):
        print("Encountered some data  :", data)

parser = MyHTMLParser()
parser.feed('<html><head><title>Test</title></head>'
            '<body><h1>Parse me!</h1></body></html>')
源html为：
<html>
 <head>
  <title>Test</title>
 </head>
 <body>
  <h1>Parse me!</h1>
 </body>
</html>
输出结果为：

Encountered a start tag: html
Encountered a start tag: head
Encountered a start tag: title
Encountered some data  : Test
Encountered an end tag : title
Encountered an end tag : head
Encountered a start tag: body
Encountered a start tag: h1
Encountered some data  : Parse me!
Encountered an end tag : h1
Encountered an end tag : body
Encountered an end tag : html

现在标签内容都能解析了。

总结：

1）继承HTMLParser类

class MYParser(HTMLParser)：

2）def handle_starttag(self, tag, attrs) #重定义解析开始标签，tag为标签，attrs是标签的属性及属性值：是个dict

#这儿有一个例子，提取网页中的网址

3） def handle_endtag(self, tag): #重定义解析结束标签

4）def handle_data(self, data): #重定义解析数据