zero8989的博客

原创 基于Scrapy的链家二手房爬虫

摘要 本项目是python课程的期末练手项目，在简要学习完python和爬虫相关的Scrapy框架后，基于这两者的运用最终完成了对于链家网站二手房页面的信息进行爬取，并将爬取的数据存放于MongoDB之中，使用Studio 3T进行查看。 1引言 1.1背景 在本学期的python课程中，通过网课粗略的掌握了python的基础知识之后，老师提出通过运用python的模块进行附加的学习，于是我选择了Scrapy框架的学习，由此为基础对于链家网站的信息进行了爬取数据的操作，并将爬取的数据保存。 1.2意义 这个