
爬虫
文章平均质量分 50
Python爬虫
夜莺yeying
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Scrapy中yield有什么作用?
在 Scrapy 中,yield语句用于生成一个Request或Item对象,并将其提交给 Scrapy 引擎进行处理。这个对象可以是一个需要下载的新页面的请求(Request),或者是从当前页面中提取的数据条目(Item具体来说,在爬虫代码中,yield 通常用于以下两个方面:在解析函数中生成 Item 对象,用于将爬取到的数据保存到数据库或者文件中。在解析函数中生成 Request 对象,用于构造下一次请求。当爬虫解析完一个页面后,需要根据页面内容构造出下一次请求并发送给服务器。原创 2023-05-24 22:58:01 · 1055 阅读 · 1 评论 -
extract()和extract_first()区别
Scrapy中extract()和extract_first()区别原创 2023-05-23 23:42:49 · 1656 阅读 · 0 评论 -
python爬虫使用requests和urllib下载图片方法
python爬虫使用requests和urllib下载图片方法原创 2023-05-22 00:12:34 · 1584 阅读 · 3 评论