flink-standalone提交作业

BigData-0

于 2021-06-12 20:08:26 发布

阅读量859

点赞数

分类专栏：大数据数仓实时文章标签： flink 大数据

Author:baiyun ,Email:mitbaiyun@163.com

本文链接：https://blog.youkuaiyun.com/JavaBigData/article/details/117843960

版权

大数据数仓同时被 2 个专栏收录

34 篇文章

订阅专栏

实时

13 篇文章

订阅专栏

本文介绍了如何在Flink standalone环境中安装配置并启动集群，随后通过Scala示例展示了如何创建socket流并进行数据处理。最后讲解了如何将代码打包运行，是Flink入门开发者的重要参考。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

flink-standalone 安装配置好后

启动flink集群/opt/module/flink/bin/start-cluster.sh

在这里插入图片描述

http://192.168.9.101:8081/#/task-manager

在这里插入图片描述

编写样例

import org.apache.flink.api.scala.ExecutionEnvironment
import org.apache.flink.streaming.api.scala._

object FlinkTest {
  def main(args: Array[String]): Unit = {
    val env = StreamExecutionEnvironment.getExecutionEnvironment
    val input = env.socketTextStream("hd101", 9999)
    val value = input.map((_, 1))
    value.print("t")
    println(value)
    env.execute()
  }

}

在这里插入图片描述

上传到服务器

 flink run  \
-c FlinkTest \
 /home/baiyun/test/flinktest.jar

在这里插入图片描述