使用Python脚本抓取aws所有的IP地址

原创

已于 2022-03-09 11:46:27 修改 · 3.2k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#aws地址范围 #python

于 2019-12-06 09:43:52 首次发布

为了满足客户业务需求，需要抓取AWS新加坡所有IP地址来设定路由。AWS官网有专门的链接列出所有IP地址，所以只需要利用脚本筛选出新加坡地址就OK。

所有IP地址链接：https://ip-ranges.amazonaws.com/ip-ranges.json

上述链接中“region”分别代表的意思：区域和可用区 - Amazon Elastic Compute Cloud

aws官网给出的抓取方法：AWS IP 地址范围 - AWS 一般参考

[root@PythonLearn home]# cat get_ips.py 
#!/usr/bin/env python
import requests

ip_ranges = requests.get('https://ip-ranges.amazonaws.com

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

ashq

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

21、使用 Docker 和 Elastic Cloud 构建灵活的抓取服务

c2d3e4f的博客

09-07

本文介绍了如何使用 Docker 和 Elastic Cloud 构建灵活的抓取服务。内容包括使用 Docker Compose 创建抓取微服务、配置 Elastic Cloud 账户、通过 curl 和 Python 连接并操作 Elasticsearch 集群、使用 Kibana 可视化数据，以及通过 Python API 执行查询。此外，还详细描述了将 Docker 容器迁移到 Amazon ECR 并在 Amazon ECS 中运行的步骤。整个博文提供了一个完整的解决方案，涵盖了从数据抓取、存储、查

AWS 中文入门开发教学 9- 网络IP范围设计

weixin_43487849的博客

08-18

403

考虑到系统整体可用性，今后需要将服务部署到多个AZ区，一个AZ区对应一个子网，所以应该提前做好IP地址的规划。主要用于对外公开的服务器，外部可直接访问到，如：Web，API服务器。主要用于内部使用的服务器，外部不可访问到，如：DB, Redis等。.........

参与评论您还未登录，请先登录后发表或查看评论

探索AWS公共IP地址：aws_public_ips工具

gitblog_00024的博客

05-19

473

探索AWS公共IP地址：aws_public_ips工具在云服务的领域中，管理与跟踪AWS（亚马逊网络服务）关联的公共IP地址是一项重要任务。这就是aws_public_ips项目登场的地方。这个强大的开源工具旨在帮助开发者和运维人员轻松获取AWS账户下所有公有IP地址，无论是IPv4还是IPv6。项目简介 aws_public_ips是一个用Ruby编写的命令行工具和库，能检索到一系列AWS...

多个AWS环境下，通过EC2名称获取EC2的IP

秃头披风侠

01-22

380

两个环境的EC2命名不同，可以用 param($EC2_Name) $check=$EC2_Name.SubString(0,1) if (($check -eq "w") -or ($check -eq "P")) { Initialize-AWSDefaultConfiguration -ProfileName aws_1 -Region ap-northeast-1 } else { Initialize-AWSDefaultConfiguration -ProfileName aws

AWS 为 EC2 获取IPV6地址

SINGWIN01的博客

11-07

915

验证访问 http://[IPV6地址] 注意IPV6地址在网页访问是要带方括号[ ]在EC2控制台选择EC2在下面信息框中点击联网，点击接口ID跳到对应的网络接口网页。在VPC子网的控制台下选择想要添加IPV6的子网，点击操作→编辑IPV6CIDR。在VPC控制台中选中要开启IPV6的VPC，点击操作→编辑CIDR。第三步：将 IPv6 默认路由添加到具有 IGW 目标的子网路由表。第二步：将 IPv6 子网添加到 EC2 子网。第四步：给现有的EC2添加IPV6地址。点击添加新的IPv6 CIDR。

AWS VPC 中的 IP 地址范围

探索云原生与智能化驱动下的安全运维新范式。关注DevSecOps、可观测性、AIOps等前沿领域，与您共赴技术前沿。

11-08

413

在 Amazon Web Services (AWS) 的生态系统中，虚拟私有云（VPC）是一个核心组件，它允许用户在 AWS 云中创建一个逻辑隔离的网络环境。理解 VPC 中的 IP 地址范围对于有效设计和管理云网络架构至关重要。本文将深入探讨 AWS VPC 中的 IP 地址范围，包括其限制、最佳实践和常见问题。

获取AWS所拥有的公网IP列表

aws0to1的博客

09-08

7151

AWS提供了所有区域的的所有服务所可能使用的IP列表段。 URL：https://ip-ranges.amazonaws.com/ip-ranges.json json文件中主要信息格式如下 { "ip_prefix": "52.95.255.64/28", "region": "eu-west-1", "service": "AMAZON

精通自动化脚本编写：掌握Shell和Python脚本的10个关键技巧

首先，我们从Shell脚本的核心技巧开始，涵盖基础构建块、高级用法以及最佳实践，然后转向Python脚本，强调其基础语法、高级特性以及编写高效可维护代码的方法。在实战项目章节中，我们深入探讨了自动化任务调度与...

Python爬虫图片：从入门到精通

小相探索IT世界

08-17

3630

爬虫（Web Crawler 或 Spider）是一种自动浏览网络的程序，它按照一定的算法顺序访问网页，抓取网页上的信息。图片爬虫是网络爬虫的一种特殊形式，专注于从互联网上抓取图片资源。与文本数据爬虫相比，图片爬虫在技术上有一些独特的考量和挑战。图片爬虫是一种自动下载网页中图片的程序，它可以识别图片链接并将其保存到本地或云存储中。是一个用于解析HTML和XML文档的库，它能够从复杂的HTML文档中提取数据。

查询自己的ip地址

05-23

### 如何查询自己的公共IP地址要查询您的公共IP地址，可以通过多种方法实现。以下是几种常见的方式： ...此Python脚本片段展示了另一种自动化手段去抓取远程主机反馈回来的结果作为最终答案呈现出来。 ---

Laravel开发-aws-ip-range-middleware

08-28

Laravel开发-aws-ip-range-middleware 用于Amazon Web Services（AWS）IP地址范围的Laravel中间件

aws-whitelist:用于获取最新 AWS IP-Ranges json 文档并添加到 IPtables 白名单的脚本

07-18

aws-白名单用于获取 .json 格式的最新 AWS IP-Ranges 的脚本，并将其分类为 IPtables 命令以将 AWS 范围列入白名单： aws-ip-range.py 脚本获取最新的 amazon ip-ranges.json，遍历所有包含的范围并以 iptables 命令的格式输出 IP/CIDR 以将该范围列入白名单。就我而言，我使用它来将端口 8080 列入白名单以接收 SNS 通知但阻止其他任何内容。注意：对于我的要求，额外的 if 语句仅过滤特定范围，例如。 ap-southeast-2。根据您的需要删除或更改。 iptables-whitelist.sh 脚本运行 python 脚本，刷新 iptables，然后运行 iptables 命令列表到白名单。我每天运行这个以满足我的需要。 TO DO ：让python检查ip-ranges.j

aws-ip-ranges：跟踪AWS的ip-ranges.json文件的历史记录和大小

02-12

AWS的ip-ranges.json AWS提供了一个数据文件，该文件显示了其服务使用的当前IP范围，称为。您可以在阅读有关该文件的更多信息。该存储库跟踪对该文件的更改，并基于SNS主题上的触发器自动生成此图表，该图表显示AWS如何控制Internet的IPv4地址空间的百分比。最近15次更新：（不显示不影响计数的更改）百分知识产权更改 CIDR 2021-02-12 07:14:13 1.50146 55588039 +64 + 13.34.40.0 / 26 2021-02-11 00:34:11 1.50146 55587975 +64 + 13.34.1.0 / 26 2021-02-10 20:54:11 1.50146 55587911 +256 + 15.230.152.0 / 24 2021-02-10 18:14:1

aws-ip-ranges-json：AWS IP范围历史记录跟踪器Amazon-AWS通过已发布的ip-ranges.json文件提供了其各种服务使用的IP地址列表。该Git存储库跟踪此文件，以便易于识别更改

02-09

AWS IP范围历史记录跟踪器 Amazon AWS通过已发布的文件提供了其各种服务使用的IP地址列表。他们可以直接从获得此实时文件，但他们仅提供当前列表，没有更改历史记录。具体来说，此文件跟踪以下服务的IPv4和IPv6 IP地址：亚马逊通云9 CloudFront EC2 全球加速器 53路 S3 工作空间该Git存储库跟踪此文件，以便轻松识别更改。我还拆分了各种服务，以便您可以查看每个服务的更改频率。通过这些更新，您可以查看随着时间变化的频率和重大程度。请注意，Amazon将此列表用于关键任务应用程序。因此，此存储库仅用于提供信息。 AWS IP Ranges资源实时文件 -常规参考 -订阅更改通知

aws设置静态ip

Aaron_Zhang939的博客

05-12

1051

请注意，NLB的静态IP地址是通过将其绑定到Elastic IP地址来实现的。因此，在创建NLB时，您需要指定要使用的Elastic IP地址的分配ID。eipalloc-12345678901234567应替换为您要将NLB绑定到的Elastic IP地址的分配ID。这将使用上面的YAML文件创建一个名为my-nlb的NLB，并将其附加到指定的子网和Elastic IP地址。subnet-1234567和subnet-7654321应替换为要将NLB附加到的子网ID。点击复制后，将打开C知道体验页。

蛙鳜鸡鹳狸猿

09-16

2433

目前工作中需要维护包括亚马逊AWS、阿里云Alibaba Cloud和微软云Microsoft Azure在内的云平台服务设施。关于白名单组IP地址切换（旧的IP换成新的IP）的工作是分云平台进行的，刚开始独立写每个云平台的脚本，后来因为常用就整合在了一起。参考GitHub上的完整代码：https://github.com/Bilery-Zoo/Cloud_Platform_Maintenance...

aws轻量服务器修改公网IP

qq_63010039的博客

04-25

327

对于一些客户，他们开启的轻量或者EC2所绑定的IP地址，有时候会被aws墙，所以经常会更改自己的公网IP。重启实例（客户可能面临着业务中断，一定要和客户沟通好）点击Detach，将原先绑定的IP剥离掉。这个时候分配的是动态的公网IP。

【亲测免费】 AWS 公共 IP 地址查询工具——aws_public_ips

gitblog_00221的博客

11-27

493

AWS 公共 IP 地址查询工具——aws_public_ips aws_public_ips 是一个开源项目，旨在帮助用户获取与 AWS 账户关联的所有公共 IP 地址（IPv4/IPv6）。该项目主要使用 Ruby 编程语言开发。项目核心功能 aws_public_ips 的核心功能包括：查询 AWS 账户下所有公共 IP 地址。支持多种 AWS 服务，包括 APIGateway、Cl...

在AWS EC2上为网站加速：手把手教你配置CloudFront CDN（实战指南）