weixin_43386443的博客

PUP Crawler 是一个基于 Puppeteer 的简单爬虫工具，适用于爬取动态和静态加载的网站，尤其适合处理“列表-详情-内容”结构的网站，如电影视频类站点。通过 npm 安装后，用户可以使用 PupCrawler 类创建爬虫实例，并通过 open、close 和 crawlPage 方法控制爬取过程。工具支持多种爬取模式，包括静态和动态页面，并提供丰富的配置选项，如超时时间、延迟时间、页面加载配置等。此外，PUP Crawler 还支持前置、后置、回调、报错和最终执行函数，以及自循环递归功能，增强

复杂用法：详细看example.ts文件，那以腾讯动漫为例，爬取列表和详情和内容页。这是一个基于puppeteer的简单的爬虫，可以爬取动态、静态加载的网站，好用得很。常用于【列表-详情-内容】系列的网站，比如电影视频等网站。

deno爬虫系列