活动的笑脸的博客

python3进行网络爬虫工作不可避免对某一网站进行大量的访问，短时间对网站的大量访问可能会被网站管理者发现继而被管理者限制访问的速度和次数，甚至对本机的IP进行封禁。为此在爬虫工作前进行伪装，本次文章讲述如何设置代理IP（如何获取有效的代理IP，读者可以查找本人之前的文章[https://blog.youkuaiyun.com/weixin_43215588/article/details/94215201...

结合上回的建立代理IP池，代理IP池里面的IP地址和相关数据内容肯定是庞大的，如果将这些数据和编写好的程序放在同一界面，这可能会导致代码有些杂乱和不简洁，因此本文要讲述一个能把数据和代码分离的小技巧。 首先导入要python3里的模块： from configparser import ConfigParser import requests import random 这里需要新建一个IP池....