爬虫工具之selenium（五）-建立代理IP池_selenium ip代理池-优快云博客

本文介绍了如何利用selenium创建代理IP池，包括验证代理IP有效性与爬取免费代理IP的步骤。通过正则表达式re.findall进行匹配，并根据需求选择http或https类型的代理，确保请求时使用正确的代理IP。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

主要思路是分两步：第一步判断代理IP是否有效，第二步爬取免费网站代理IP，第三步循环判断爬取的代理IP是否有效

一、判断代理IP是否有效

proxies：代理，分为http与https两种，爬取不同网站时需要选用不同类型的proxies，只有当proxies类型与想访问的网站类型相同时代理ip才会起作用，否则request请求使用的是你真实的ip地址，参考代理IP中的 proxies 介绍及使用
re.findall（）：返回string中所有与pattern相匹配的全部字串，返回形式为数据,详细用法参考正则表达式 re.findall 用法、正则表达式 - 元字符
re.findall(pattern,string,flags=0)
代码如下，主要参考测试代理ip是否可用的方法：

import random
import requests
import re

'''
设计思路：利用http://icanhazip.com/返回的IP进行校验，如返回的是代理池的IP，说明代理有效，否则实际代理无效（也可以利用）
'''

# 代理ip池:proxies主要指定代理
PROXIES_NEW = {
   
   
    "https": [
        "https://175.42.129.107:9999",
        "https://115.221.246.181:9999",
        "https://121.233.207.161:9999"