Flink 整合 Nacos实现动态服务配置功能Demo

1 前言

当我们开发Flink程序的时候一些配置或一些规则可能需要根据系统要求或需求发生变更,一般常见的做法我们可以开启通过将配置或规则存储到数据库(如MYSQL,REDIS),然后通过在程序中我们自己通过JDBC连接的方式去读取规则。这样做比较麻烦,我们可以通过阿里开源的NACOS来协助我们实现这样的功能,NACOS 官网是如下定义的:

Nacos 致力于帮助您发现、配置和管理微服务。Nacos 提供了一组简单易用的特性集,帮助您快速实现动态服务发现、服务配置、服务元数据及流量管理。

Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。 Nacos 是构建以“服务”为中心的现代应用架构 (例如微服务范式、云原生范式) 的服务基础设施。

具体我们可以访问nacos中文官方文档https://nacos.io/zh-cn/docs/what-is-nacos.html

 

2 环境准备

2.1 nacos下载地址

https://github.com/alibaba/nacos/releases

2.2 安装

学习时可以单机安装,因此不再赘述

2.3 启动

在window下通过点击bin/startup.cmd启动,启动后通过 http://localhost:8848/nacos/index.html地址验证是否启动成功

Flink 配置 Nacos 主要用于动态管理 Flink 集群中的配置信息。Nacos 是一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。通过将 Flink 配置信息存储在 Nacos 中,可以实现配置的动态更新而无需重启集群。 以下是使用 Nacos 管理 Flink 配置的基本步骤: 1. 首先需要在 Nacos 中创建相应的配置文件,包括 Flink 的配置项,如任务管理器(TaskManager)的数量、资源等。 2. 在 Flink 的配置文件 `flink-conf.yaml` 中添加 Nacos 相关的配置项,例如 Nacos 的地址、命名空间、配置分组以及数据ID等。 3. Flink 程序启动时会读取 `flink-conf.yaml` 中的配置,并连接到 Nacos 服务器拉取配置信息。 4. 当需要更新配置时,可以直接在 Nacos 控制台中修改配置,Flink 集群会实时感知到配置的变化,并自动加载新的配置。 这里是一个简化的 `flink-conf.yaml` 文件配置示例: ```yaml # Nacos 配置项 nacos.server-addr: 127.0.0.1:8848 nacos.namespace: f28a599b-7733-4e7f-b787-76e6c8d5d5d5 nacos.group: DEFAULT_GROUP nacos.dataId: flink-config ``` 在程序中,可以通过 Flink 的配置对象 `Configuration` 来访问这些配置: ```java Configuration config = new Configuration(); String nacosServerAddr = config.getString("nacos.server-addr"); String nacosNamespace = config.getString("nacos.namespace"); String nacosGroup = config.getString("nacos.group"); String nacosDataId = config.getString("nacos.dataId"); // 使用获取到的 Nacos 配置信息连接到 Nacos 服务器获取实时配置 ``` 通过以上步骤,Flink 集群的配置就可以通过 Nacos 进行动态管理了。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值