Python爬虫教程-网络爬虫分类

系列文章目录

• Python爬虫教程-前言
• Python爬虫教程-初识网络爬虫
• Python爬虫教程-网络爬虫分类
• Python爬虫教程-网络通信（补习，不熟悉的同学赶紧看）
• Python爬虫教程-Requests: 让 HTTP 服务人类

---

---

前言

本章将重点介绍爬虫的分类，并详细阐述通用爬虫的原理。我们有两个主要目的。首先，通过了解通用爬虫，我们可以更深入地认识爬虫技术，尽管它在日常工作中并不常用，但我们仍然需要对其有一定了解。其次，通过学习通用爬虫的原理和应用场景，我们可以认识到聚焦爬虫的优势和适用场景，为后续的学习打下坚实的基础。

---

一、爬虫的分类与工作原理

在互联