最快的方法教你python爬虫

创建scrapy
命令：scrapy startproject mySpider_01

打开后效果：

组成介绍：
scrapy.cfg ：项目的配置文件
mySpider_01/ ：项目的Python模块，将会从这里引用代码
mySpider_01/items.py ：项目的目标文件
mySpider_01/pipelines.py ：项目的管道文件
mySpider_01/settings.py ：项目的设置文件
mySpider_01/spiders/ ：存储爬虫代码目录

1.打开mySpider_01目录下的items.py
2.Items 定义结构化数据字段，用来保存爬取到的数据
3. 可以通过创建一个 scrapy.Item 类。
4.接下来，创建一个ItcastItem 类，和构建item模型（model)

5.爬出数据生成文件

6.保存文件：方式四种，我习惯用：scrapy crawl itcast -o teachers.csv