scrapy取值方式

原创已于 2022-05-08 16:05:22 修改 · 1.2k 阅读

CC 4.0 BY-SA版权

文章标签：

于 2022-04-17 07:53:55 首次发布

2 篇文章

订阅专栏

本文探讨了如何使用XPath和CSS选择器从HTML文档中有效地提取信息。通过示例展示了如何获取属性值和文本内容，例如图片源路径和页面文本。这些技术在前端开发、网页抓取和数据解析等领域具有广泛应用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

sel = Selector(text=a.text)

xpath:

1获取属性值：@+属性值

tags = sel.xpath('//div[contains(@class,"goodsItem")]/a/img/@src').extract()

2获取文本值：text()

tags = sel.xpath("//div[@class='goodsItem']/font/text()").extract()

CSS选择器：

1获取属性值：

teacher_info = sel.css('img[src$=".jpg"]').xpath('@src').extract()
teacher_info = sel.css('img[src$=".jpg"]::attr(src)').extract()

2获取文本值：

teacher_info=sel.css('.goodsItem > p a::text').extract()