如何理解scrapy Selector

最新推荐文章于 2025-09-08 09:22:18 发布

转载最新推荐文章于 2025-09-08 09:22:18 发布 · 110 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/hustdc/p/7804980.html

文章标签：

#python

本文介绍了Scrapy中的Selector对象，解释了其如何对DOM树进行抽象并定位感兴趣的节点。此外还说明了如何使用extract()函数获取定位后的子树内容。

1 scrapy Selector是什么

Selector对象本质上是对DOM tree的子树的抽象，这种抽象的目的是用于定位我们感兴趣的node。比如某次http response是一棵完整的DOM tree，该response的Selector是对整个DOM tree的抽象，然后xpath()函数对Selector进行了定位，得到了更细化的子树或者子树的集合。

2 要获取定位后的Selector所抽象的子树中的内容，并且用unicode string来表示，就要用到extract()函数。

转载于:https://www.cnblogs.com/hustdc/p/7804980.html