本文介绍了Python爬虫的基础知识，包括开发环境（window10, Python3.8, PyCharm）、数据来源（用户数据、政府数据、数据管理公司、自爬数据）及其作用（数据分析、智能产品练习）。详细讲解了爬虫的概念、分类（通用爬虫、聚焦爬虫、增量爬虫）以及爬虫原理，并对比了不同编程语言（PHP、Java、Python）编写爬虫的优缺点，强调Python在爬虫开发中的高效和便捷。"
129710958,17218354,Python-Django手机电商网站毕设详解,"['Python', 'Django', 'web开发', '电商系统', '课程设计']
在学习Python爬虫部分，需要你已经学过Python基础和前端的相关知识。
开发环境介绍：
- window10 操作系统
- Python解释器3.8
- 集成开发环境pycharm
数据的来源及作用
数据的来源有哪些？
- 用户产生的数据： 百度指数
- 政府统计的数据： 政府数据
- 数据管理公司： 聚合数据
- 自己爬取的数据： 爬取网站上的某些视频
数据的作用
- 数据分析
- 智能产品的练习数据
- 其他（比如买卖）
爬虫的相关概念
a) 爬虫的概念
爬虫就是应用程序，从网上下载各种各样的资源。
换句话说就是使用编程语言编写一个用于爬虫web或者app的数据应用程序。
怎么爬取数据呢？
- 找到要爬取的目标网站，发起请求
- 分析url是如何变化的和提取有用的url
- 提取有用的信息
爬虫什么数据都可以爬吗？
当然不能，需要遵守一定的规则和协议
可以看一下京东的：
订阅专栏 解锁全文
扫一扫
1828
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
