Awesome Computer Vision, 做计算机视觉的程序员

前面2篇分别介绍了从2个免费代理网站爬取免费代理来构建我们自己的代理池。这一篇我们从实战的角度来将我们的代理池用起来，通过代理的方式访问我们的优快云博客（优快云会认为是一次访问，访问量+1）,从而实现访问量的增长，仅供学习爬虫使用, 切勿滥用…

上一篇讲到从66代理上爬取免费代理，为了进一步扩大我们的代理池，今天讲一下从另一个网址获取。

很多时候我们会使用爬虫或者脚本帮我们爬取数据用于数据分析、模型训练等，常见的反爬手段之一就是限制IP的访问频率，所以为了让爬虫或脚本能够正常运行，我们需要有足够多的IP。代理IP就是通过代理的IP去访问我们需要的网站，对于目标网站表现出的是代理IP, 从而防止同一IP访问频率过高被封。如何拥有足够多的代理地址呢？我们可以使用爬虫手段去自动爬取提供免费代理的网站，建立自己的代理池。本篇以爬取66代理为例，记录整个过程。