自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(10)
  • 问答 (2)
  • 收藏
  • 关注

原创 Item Pipeline-Scrapy框架

Item Pipeline即项目管道、它的调用发生在Spider产生Item对象之后。当Spider处理完Response、Item就会被Engine传递给Item Pipeline。被定义的Item Pipeline就会被按顺序依次被调用,完成一连串的处理过程、比如数据清洗、数据存储。清洗HTML数据验证爬取的数据,检查爬取字段查重、去重将爬取到的结果存储起来。

2025-04-18 22:55:43 989

原创 有道翻译逆向学习

仅供学习交流

2025-04-17 18:37:04 1091

原创 Spider Middleware爬虫中间件详解-scrapy爬虫框架学习

scrapy的Spider Middleware详解

2025-04-15 23:05:48 684

原创 requests爬虫库详解

request爬虫库详解

2025-04-15 09:46:53 622

原创 spider类初识-scrapy核心

scrapy的spider类详解

2025-04-15 08:32:13 256

原创 Scrapy的Downloader Middleware下载中间件初识

Downloader Middleware的基本知识

2025-04-14 21:29:05 1003

原创 scrapy入门

scrapy入门

2025-04-12 20:28:03 282

原创 并发编程笔记

并发编程:多线程、多进程、多协程,从懵逼到恍然大悟

2023-06-04 01:41:40 859 1

原创 Markdown的基础语法

根据菜鸟自己练的,也可以参考

2022-12-14 21:35:28 173

原创 python字符串方法

python的字符串方法你还记得吗?

2022-01-11 20:43:40 456

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除