Flink安装极简教程-单机版

本文详细介绍如何从下载到配置并启动 Apache Flink 1.6.3 单机版,包括环境搭建步骤及通过官方案例进行功能验证的过程。文中还提供了启动后检查服务状态的方法。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一:安装

Flink官网下载地址:https://flink.apache.org/downloads.html

选择1.6.3版本

 下载:

wget http://mirrors.hust.edu.cn/apache/flink/flink-1.7.1/flink-1.7.1-bin-hadoop26-scala_2.11.tgz

解压:

tar -zxvf flink-1.6.3-bin-hadoop26-scala_2.11.tgz
mv  flink-1.6.3 flink

查看本机host

进入flink目录,修改conf/flink-conf.yaml文件

vim  conf/flink-conf.yaml

 修改conf/masters文件,修改后内容如下:

启动单机版flink:

bin/start-cluster.sh

启动界面如下:

查看启动是否成功:

 查看dashboard界面:http://192.168.186.129:8081

 

二:官方案例演示

1.启动一个终端输入如下指令:

nc -lk 8000

2.启动第二个终端,执行flink自带的wordcount案例

bin/flink run examples/streaming/SocketWindowWordCount.jar --port 8000

 3.在第一个终端发送数据:

4.测试结果保存在log/flink-root-taskexecutor-0-woniu.out文件中

5. Dashboard也可以看到任务信息

 

### 关于Flink 1.3.6 和 Flink-CDC 2.2 的集成与兼容性 对于 Flink 1.3.6 版本而言,其属于较早版本的 Apache Flink,在功能支持以及与其他工具的集成方面存在一定的局限性。具体到 Flink-CDC 2.2 集成时,需要注意以下几点: #### 1. **Flink CDC 的最低版本需求** Flink-CDC 是一个用于捕获变更数据并将其流式传输至下游系统的框架。然而,Flink-CDC 2.x 系列通常依赖更高版本的 Flink 运行环境(通常是 Flink 1.10 或以上)。由于 Flink 1.3.6 属于早期版本,可能无法满足 Flink-CDC 所需的核心库接口和 API 支持的要求[^2]。 #### 2. **Java SDK 兼容性问题** 正如提到的 Hadoop-JDK 兼容性矩阵所示,不同 Java 版本可能会引入不向后兼容的变化。如果运行环境中使用的 JDK 版本较高,则可能导致某些内部机制失效。因此,在尝试将 Flink 1.3.6 与 Flink-CDC 2.2 结合使用之前,应确认所选 JDK 是否能够适配这两个组件的需求[^1]。 #### 3. **API 差异引发的功能缺失** Flink 1.3.6 中的数据源定义方式、状态管理策略以及其他核心特性相较于后续版本有显著差异。而这些变化直接影响到了像 Flink-CDC 这样基于最新版设计开发的应用程序能否正常工作。例如,Flink-CDC 可能会利用 Table/SQL 接口来化配置流程,但在旧版本中该部分尚未完善[^3]。 ```java // 示例代码展示如何通过Table API设置CDC连接器(仅适用于新版本) tableEnv.executeSql(""" CREATE TABLE mysql_binlog ( id BIGINT, name STRING, age INT, proc_time AS PROCTIME() ) WITH ( 'connector' = 'mysql-cdc', 'hostname' = 'localhost', 'port' = '3306', 'username' = 'root', 'password' = '', 'database-name' = 'test_db', 'table-name' = 'users' ) """); ``` 上述代码片段展示了现代 Flink 使用 MySQL Binlog Connector 设置表的方式,但此方法并不适合应用于非常老旧如 v1.3.x 的发行版上[^4]。 --- ### 总结建议 鉴于当前情况,强烈推荐升级基础架构中的主要软件包——即把 Flink 升级到至少 1.10+ 后再考虑接入最新的 Flink-CDC 功能模块。这样不仅可以获得更好的性能表现还能规避因跨代组合带来的潜在风险。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

码农code之路

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值