本项目旨在通过收集中国各大长租公寓品牌的数据，如自如、蛋壳等，分析其在不同城市的房源信息、设备配置、位置优势及租金价格，以洞察各品牌的服务质量和市场趋势。运用Python爬虫抓取数据，Spark进行预处理，Hive作为数据仓库，MySQL存储分析结果，并最终通过热力图和折线图展示分析成果。
长租公寓项目
项目描述：
公司想通过目前中国长租公寓的信息，比如：长租公寓品牌（比如自如、蛋壳、优逸客家等多个品牌）、房源位置（这里具体到省、市、区、小区名），房源个数，房屋设备、位置优势、租房价格等，去分析不同公寓品牌在不同城市的服务情况。从而去决策租房的消费情况和各个品牌的一个个走势。最终以热力图、折线图等呈现出来。
项目流程：
1.从网上抓取各个品牌的f房源信息
2.进行数据预处理、清洗、去重等
3.数据仓库，进行分析
4.数据挖掘、算法分析
5.可视化展示
项目实现：
1.采用python3进行爬取数据
2.spark进行数据预处理
3.hive作为数据仓库
4.算法模型，将最终数据落到MySQL中
5.可视化展示
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
