学习目标:
运用scrapy框架
将爬取的数据保存到数据库
学习内容:
1、掌握 python基本语法
2、运用pychrame开发环境
3、 获取数据
4、保存到数据库
学习时间:
1、 周一至周五晚上 7 点—晚上9点
2、 周六上午 9 点-上午 11 点
3、 周日下午 3 点-下午 6 点
学习产出:
大家好丫!我是honey,我今天想要和大家分享一下我大二实训是所搞的项目。嘿嘿就是爬取网站的数据。我想分享一下我的代码。
大家应该都知道scrapy框架吧,这个框架用来爬虫真的是绝绝子,首先在setting里面对所要运用的函数进行设置。
这里我就只贴出数据库的设置,其他该打开的我就不细说了哈,大家都会。
#数据库的相关设置
MYSQL_HOST = '127.0.0.1'
MYSQL_USER = 'root'
MYSQL_PASSWORD =