潭州课堂25班：Ph201805201 爬虫高级 第十二 课 Scrapy-redis分布 项目实战 (课堂笔记)...

建代理池，

1，获取多个网站的免费代理IP，

2，对免费代理进行检测，》》》》》携带IP进行请求，

3，检测到的可用IP进行存储，

4，实现api接口，方便调用，

5，各个组件 的调试，

 

西剌代理：

http://www.xicidaili.com/nn/

 

66 IP代理

http://www.66ip.cn/

 

快代理

https://www.kuaidaili.com/free/

 

转载于:https://www.cnblogs.com/gdwz922/p/9820473.html