Xpath:爬虫用途简要介绍

这篇博客介绍了如何使用Python的lxml库通过XPath安装和解析HTML文档。示例中展示了如何通过属性选择器获取特定元素,如查找title为'data'的a标签,以及如何获取具有特定class的table中链接的href属性。此外,还演示了利用text()和string()方法提取文本内容。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Xpath的安装

pip install lxml

生成 HTML 的 DOM 树:

from lxml import etree

page = etree.HTML(html_doc)
page.xpath('//a[@title="data"]')  #通过[]来指定标签内属性,@来指定属性

获取两种class的对应链接:/@href

page.xpath('//table[@id = "play"]/tr[@class = "odd" or "even"]/td[@class="text-left"]/a/@href')

通过 text() 与 string() 方法来获得其中的文本:

page.xpath('//li/a/text()')
page.xpath('string(//li[1]/a)')
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值