本文介绍了如何安装和运行Scrapy，包括创建Scrapy项目、生成爬虫文件、理解Scrapy的工作流程以及基本的爬虫应用。通过一个简单的案例，演示了Scrapy如何爬取和解析网页，存储数据，并利用数据管道进行数据清洗。最后，文章提到了Scrapy的imspm.com超级产品经理频道爬虫示例。
在正式编写爬虫案例前，先对 scrapy 进行一下系统的学习。
scrapy 安装与简单运行
使用命令 pip install scrapy 进行安装，成功之后，还需要随手收藏几个网址，以便于后续学习使用。
- scrapy 官网：https://scrapy.org；
- scrapy 文档：https://doc.scrapy.org/en/latest/intro/tutorial.html；
- scrapy 更新日志：https://docs.scrapy.org/en/latest/news.html。
安装完毕之后，在控制台直接输入 scrapy，出现如下命令表示安装成功。
> scrapy
Scrapy 
订阅专栏 解锁全文
扫一扫
29万+
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
