Flink-SQL管理工具flink-streaming-platform-web部署

最新推荐文章于 2025-03-23 00:33:29 发布
最新推荐文章于 2025-03-23 00:33:29 发布
阅读量3.3k 收藏 7
点赞数 3
分类专栏： Flink 文章标签： flink flink-sql platform-web flinksql管理平台
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/litlit023/article/details/113776709
版权
本文介绍了如何部署flink-streaming-platform-web并结合flink、kafka实现数据处理。详细步骤包括软件版本选择、依赖jar包配置、flink和平台的启动、系统及任务配置，以及观察运行结果和数据变化。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

目录

1. 概述

2. 软件版本

2.1 软件版本列表

2.2 添加第3放依赖jar包的方法

3. 启动

4.1 登录页面

4.2 系统配置

4.3 任务配置

5. 观察运行结果

5.1 观察任务提交结果

5.2 观察数据变化

5.3 在flink的ui上观察任务

6. 参考资料

1. 概述

这里部署flink-streaming-platform-web，并跑通kafka->flink sql -> mysql的一个样例，实时从kafka中读取json字符串，经过ETL操作，将数据汇总后写入mysql sink

 -- ETL 
INSERT INTO flink_web_sample.sync_test_2
SELECT day_time,SUM(amnount) AS total_gmv
FROM flink_test_3
GROUP BY day_time;

 

2. 软件版本

2.1 软件版本列表

  • flink-streaming-platform-web.tar.gz 

flink-streaming-platform-web(20210202).tar.gz  （

了解本专栏 订阅专栏 解锁全文 超级会员免费看
flink-streaming-platform-web 源码解读
litlit023的专栏
02-28 2596
1. 任务列表模块分析 任务列表模块如下图所示，其中新增和修改任务操作，对应到 job_config表里面插入、更新一条记录。在插入、更新时对任务配置进行检测。 1.0 页面交互部分代码结构 0、与页面交互的Controller API，代码位于： -> flink-streaming-web 模块 -> controller包 -> api 包里面 1.1 新增任务流程 -> addPage.ft...
Flink SQL 管理平台 flink-streaming-platform-web 安装搭建
lck_csdn的博客
10-25 928
flink sql 管理平台
Flink SQL管理平台flink-streaming-platform-web安装搭建-整理
m0_57781768的博客
12-02 2738
为什么我下的是适配flink 1.14.3的，我前面安装flink1.13.5，我也是下了一堆flink，经过尝试，才发现flink1.13.5这个版本，适配flink-streaming-platform-web tagV20220625。最近看到有人在用flink sql的页面管理平台，大致看了下，尝试安装使用，比原生的flink sql界面确实好用多了，我们看下原生的，通过bin/sql-client.sh命令进入那个黑框，一只松鼠，对，就是那个界面。否则，安装hadoop集群可老费事儿了。
Flink基础简介和安装部署
最新发布
加贝的博客
03-23 976
Flink是⼀个分布式，高性能，随时可⽤的以及准确的流处理计算框架，Flink可以对无界数据（流处理）和有界数据（批处理）进⾏有状态计算的分布式，⾼性能的计算框架。⽆界数据流：数据流是有⼀个开始但是没有结束；有界数据流：数据流是有⼀个明确的开始和结束，数据流是有边界的。
5、Flink SQL管理平台flink-streaming-platform-web安装搭建
Rainbow的博客
06-28 1790
rest.bind-port可以设置成列表格式如50100,50101，也可设置成范围格式如50100-50200。这是缺少kafka-clients的jar包，只需将下载的kafka-clients jar包放在lib目录下重启flink，提交任务。rest.bind-port不设置，则Rest Server默认绑定到rest.port端口(8081)。用户密码过于简单，可以通过修改数据库中表user的密码。下为按照源码提供的加密方式加密的密码，密码为“，名称是新建任务填写的名称加。
Flink-Streaming-Platform-Web：一站式Flink流处理平台的深度解析
gitblog_00080的博客
04-02 657
Flink-Streaming-Platform-Web：一站式Flink流处理平台的深度解析 flink-streaming-platform-web基于flink的实时流计算web平台项目地址:https://gitcode.com/gh_mirrors/fl/flink-streaming-platform-web 项目简介 是一个基于 Apache Flink 构建的高度可定制和易用的流...
Flink-sql平台化配置之flink-streaming-platform-web
Yuan_CSDF的博客
01-08 3914
记录使用flink-streaming-platform-web平台化提交Flink任务。主要是记录通过这个工具提交flink任务的原理。 相关参考： gitee地址：flink-streaming-platform-web: 基于flink-sql的实时流计算web平台 github地址：https://github.com/zhp8341/flink-streaming-platform-web 1、idea本地开发 ...
Flink Streaming Platform Web 项目安装与使用教程
gitblog_00498的博客
08-09 742
Flink Streaming Platform Web 项目安装与使用教程 项目地址:https://gitcode.com/gh_mirrors/fl/flink-streaming-platform-web 1. 项目的目录结构及介绍 Flink Streaming Platform Web 项目的目录结构如下： flink-streaming-platform-web/ ├── bin/ ...
《小鑫发现》之Flink-SQL管理工具flink-streaming-platform-web
iOLO的博客
01-08 2406
介绍 一个方便操作Flink-SQL的工具 准备环境、程序和依赖 Flink 1.12 下载地址 这里下载的事scala 2.11的版本 Kafka 2.12-2.5.0 下载地址 这里没有去下载zookeeper，因为kafka里自带zookeeper，所以就直接用这个，别问为啥，问就是为了省事。 另外为啥是这个版本，不是最新，别问，问就是因为本地就是这个，懒得下载最新的了。 Scala 2.11 下载地址 根据自己的环境进行下载，本人是Mac下载的scala-2.12.12.tgz Flin
基于Apache Flink 封装的一个可视化的轻量级的flink web客户端系统基于flink-sql的实时流计算web平台
05-08
flink-streaming-platform-web系统是基于Apache Flink 封装的一个可视化的、轻量级的flink web客户端系统，用户只需在web 界面进行sql配置就能完成流计算任务。主要功能:包含任务配置、启/停任务、告警、日志等功能...
实践数据湖iceberg 第三十一课 使用github的flink-streaming-platform-web工具，管理flink任务流，测试cdc重启场景
spark_dev的博客
04-28 1472
flink重启，需要从checkpoint恢复。涉及到任务工程化管理，自研一套这种工具，很耗时，对小公司来说，吃力不讨好，所有寻找了个开源方案， 测试flink-streaming-platform-web ，支持sql,jar，各种集群模式提交，亲测可用
flink-web：Apache Flink网站
02-05
网页链接 该存储库包含Flink网站： : 。 您可以在以下位置找到此存储库的说明： : 。 在本地测试更改 您可以使用如下所示的Docker来构建网站（而无需增加主机环境）。 作为此调用的一部分传递的参数将转发到build.sh 。 # starts website with future post being disabled bash docker-build.sh -p # starts website including also future posts bash docker-build.sh -f 这两个命令都将启动一个通过http://0.0.0.0:4000提
分布式flink平台搭建
03-05
ubuntu系统下部署完全分布式flink平台及与平台相关的zookeeper，kafka平台的安装部署过程及遇见的问题的解决方案
Java代码审计-flink-streaming-platform-web
A345545108的博客
04-26 574
GitHub - zhp8341/flink-streaming-platform-web: 基于flink的实时流计算web平台flink-streaming-platform-web是一个将flink封装的一个可视化的、轻量级的flink web客户端系统，用户只需在web 界面进行sql配置就能完成流计算任务。项目结构flink-streaming-common: flink流计算相关公共类flink-streaming-core: flink流计算核心模块。
flink-streaming-platform-web 本地运行测试
CarloPan的博客
10-07 1020
项目地址： xflink-streaming-platform-web: 基于flink-sql的实时流计算web平台https://gitee.com/zhuhuipei/flink-streaming-platform-web.git 步骤 1、使用git clone 到本地后，使用IDEA打开项目 2、修改数据库连接 flink-streaming-web/src/main/resources/application.properties 3、在本地数据库中创建 flink_web 库，并执
探索高效流计算：flink-streaming-platform-web 项目推荐
gitblog_00436的博客
08-09 515
探索高效流计算：flink-streaming-platform-web 项目推荐 flink-streaming-platform-web基于flink的实时流计算web平台项目地址:https://gitcode.com/gh_mirrors/fl/flink-streaming-platform-web 在当今数据驱动的时代，流计算已成为处理实时数据的关键技术。Apache Flink 作...
Flink SQL 开源可视化界面 flink-streaming-platform-web 大数据
DevEnigma的博客
08-19 1153
总之，flink-streaming-platform-web 是一个开源的 Flink SQL 可视化界面平台，它使得非技术用户能够轻松地进行大数据处理和分析。对于那些想要利用 Flink 进行大数据处理的用户来说，flink-streaming-platform-web 提供了一个简单而强大的工具。flink-streaming-platform-web 提供了一个直观的用户界面，用户可以通过图形化的方式构建 Flink SQL 查询。最后，我们执行了一个简单的查询，统计了每个用户的点击行为数量。
在IDEA环境中调试 flink-streaming-platform-web 中的module
litlit023的专栏
03-05 452
目录 1. 概述 2. IDEA环境设置，并启动调试 2.1 设置IDEA环境 2.2 开始调试 1. 概述 本文记录在IDEA环境中调试上述项目中的flink-streaming-core 模块，关于 flink-streaming-platform-web 工程的说明，可以参考 https://blog.youkuaiyun.com/litlit023/article/details/113776709?spm=1001.2014.3001.5501 https://blog.youkuaiyun.com/l.
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值