Flink的StreamExecutionEnvironment和ExecutionEnvironment一点思考

最新推荐文章于 2025-07-16 13:43:08 发布
原创 最新推荐文章于 2025-07-16 13:43:08 发布 · 1.1w 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#StreamExecutionEnvironment #抽象类定义静态方法 #模板设计模式

本文介绍如何创建 Apache Flink 运行环境 StreamExecutionEnvironment 和 ExecutionEnvironment，并探讨了抽象类中使用静态方法 getExecutionEnvironment 的设计模式，即 Java 模板模式的应用。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Flink程序首先就是创建运行环境StreamExecutionEnvironment和ExecutionEnvironment，查看了一下源码这两个类是抽象类，但是getExecutionEnvironment是静态方法。也就是说抽象类里面定义了静态方法同时根据不同的子类类型来new。这样做的好处是提供统一访问接口，具体实现方法根据具体的子类来。这个跟Java模板模式一样。

在这里插入图片描述

Flink源码解析系列--StreamExecutionEnvironment类
打酱油的葫芦娃
03-31 1万+
本文的Flink源码版本为: 1.15-SNAPSHOT，读者可自行从Github clone. Flink 程序看起来像一个转换 DataStream 的常规程序。每个程序由相同的基本部分组成： 获取一个执行环境（execution environment）； 加载/创建初始数据； 指定数据相关的转换； 指定计算结果的存储位置； 触发程序执行。 StreamExecutionEnvironment 是所有 Flink 程序的基础。 创建 你可以使用 StreamExecutionEnvironme.
Apache Flink源码分析---flink Environment介绍
wjandy0211的博客
10-29 511
在上一节flink快速入门中我们了解到，flink程序开发主要；流程分为五步（初始化一个环境Environment，添加datatsource，添加转换transformation, 调用execute执行）。本节我们就看看flinkEnvironment。 我们知道flink分为批计算和流计算。因此flinkEnvironment也分StreamExecutionEnvironment和ExecutionEnvironment。其中 StreamExecutionEnvironment用于流...
github入门教程（非常详细）从零基础入门到精通，看完这一篇就够了
最新发布
Javachichi的博客
07-16 9004
如果你是一枚Coder，但是你不知道Github，那么我觉的你就不是一个菜鸟级别的Coder，因为你压根不是真正Coder，你只是一个Code搬运工。说明你根本不善于突破自己！为什么这么说原因很简单，很多优秀的代码以及各种框架源码都存放于github当中！
Flink核心抽象一环境对象
勇心在馨
11-27 239
一、StreamExecutionEnvironment（开发时） ​​​​StreamExecutionEnvironment是Flink应用开发时的概念，表示流计算作业的执行环境。 是作业开发的入口，数据源接口，生成和转换DataStream的接口，数据Sink的接口，作业配置接口，作业启动执行的入口。 1、流计算环境StreamExecutionEnvironment的体系 （1）LocalStreamEnvironment 本地执行环境，在单个JVM中使用多线程模拟Flink集群 ..
95-110-020-源码-Env-StreamExecutionEnvironment
九师兄
07-03 665
1.视界 2.概述 写程序的时候，第一步就是获取一个环境,StreamExecutionEnvironment是一个任务的启动的入口 // get the execution environment final StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); 但是这个做...
Flink开发五步之第一步：执行环境设定
渐宽阁读书小弟
03-11 1474
目录： 一、ExecutionEnvironment：批量数据处理环境 二、StreamExecutionEnvironment：流式数据处理环境 一、设定ExecutionEnvironment：批量数据处理环境的三种方式 （1）设定Flink运行环境，如果在本地启动则创建本地执行环境，如果在集群启动则创建集群执行环境 val env1: ExecutionEnvironment = Execu...
[Flink]一、Flink1.13
weixin_44428807的博客
07-01 1560
1. Flink简介1.1 Flink的起源和设计理念flink项目的核心目标：数据流上的有状态计算（Stateful Computations over Data Streams)。时间驱动：来一个事件处理一个事件；流处理的流水线；流&批数据分析具体定位是：Apache Flink 是一个框架和分布式处理引擎，用于对无界和有界数据流进行有状态计算。Flink 被设计在所有常见的集群环境中运行，以内存执行速度和任意规模来执行计算。1.2 Flink的应用。
总结：Flink
w2009211777的专栏
02-10 892
Flink梳理
Flink输入输出&算子&FlinkCDC
weixin_46386869的博客
01-05 2210
Flink 版本问题，flink使用Scala时，flink1.12兼容scala2.11,flink1.12不兼容scala2.12 一、简介 flink是对有界流和无界数据流进行有状态的计算（所谓状态，指的是之前的数据sparkStreaming中只有updatestateByKey有状态，但是flink中任何的算子都可以有状态，可以自己定义） 1.1sparkStreaming与flink的区别 （1）事件驱动型 sparkStreaming是时间驱动,一个批次中假如没有数据依然会从kafka拉取
flink的架构原理常用代码实现
清风竹雨
12-04 1960
文章目录1.1 什么是flink1.2 flink特点1.3 编程API二 flink架构2.1 架构图2.2 含义三 flink和其他框架对比3.1 与spark角色对比3.2 三大实时计算框架整体对比四 flink环境搭建4.1 standalone模式4.1.1 架构4.1.2 搭建步骤4.1.3 启动集群并检测4.1.4 提交flink任务4.2 flink on yarn4.2.1 官网资料4.2.2配置4.2.3 flink run4.2.3.1 任务提交4.2.3.2 提交结果4.2.3.3
Flink面试题
qq_34936033的博客
05-17 5773
关于spark和flink我可能会问这20个问题,当然并不是说简单回答一下就可以了,每一个题都可以引申很多问题,拿第一个问题来说,里面还有很多东西,比如spark的依赖关系是存在什么地方?RDD的宽窄依赖划分等? 因为你如果什么问题都问,问三天三夜都问不完,所以一定有针对性,而且后面一定会有模拟场景现场编程的问题,因为上面的问题都是偏原理的,你不会你也可以背下来,但是编程就考验你的真实水平了,比如给你一个实时计算的场景,让你写出主要的代码实现.这也是为什么我在星球里面很少分享原理性的东西,更多的怎么解决真实
6-4Table API and SQL的使用.
热门推荐
Drug discovery
10-02 1万+
All Table API and SQL programs for batch and streaming follow the same pattern. The following code example shows the common structure of Table API and SQL programs. // for batch programs use ExecutionEnvironment instead of StreamExecutionEnvironment val
Flink之DataStream API(执行环境、数据源、读取kafka)
四维大脑的博客
04-21 2177
Flink 有非常灵活的分层 API 设计，其中的核心层就是 DataStream/DataSet API。由于新版本已经实现了流批一体，DataSet API 将被弃用，官方推荐统一使用 DataStream API 处理流数据和批数据。本章主要介绍基本的DataStream API 用法。
flink系列(4)-StreamExecutionEnvironment
weixin_33841722的博客
10-23 2140
2019独角兽企业重金招聘Python工程师标准>>> ...
Flink的DataStream API的使用------执行环境（Execution Environment）
weixin_44328192的博客
09-20 1602
Flink的DataStream API的使用------执行环境（Execution Environment）
Flink源码拾遗＜二＞：StreamExecutionEnviornment
Li_DeSheng的博客
11-07 2513
StreamExecutionEnvironment是stream program执行的环境，其子类LocalStreamEnvironment会让程序在当前JJVM中执行，而子类RemoteStreamEnvironment会让程序在远程集群中执行。 ——Flink官方注释 首先，我们来看一看一个典型的Flink中的wordcount程序是什么样的。 public class WordCount { public static void main(String[] args) thr..
Flink流处理StreamExecutionEnvironment用法
杨得朝的博客
11-05 1万+
大家好，我是瓜哥，今天进行了Flink相关内容的总结和学习。Flink可以处理实时流式数据处理。 具体的资料文档可以登录flink官方文档直接进行在线学习。flink官方文档 直接看官方文档对flink的一个架构图： Apache Flink 功能强大，支持开发和运行多种不同种类的应用程序。它的主要特性包括：批流一体化、精密的状态管理、事件时间支持以及精确一次的状态一致性保障等。Flink 不仅可以运行在包括 YARN、 Mesos、Kubernetes 在内的多种资源管理框架上，还支持在裸机集群
flink上下文StreamExecutionEnvironment
GrassEva的博客
09-29 4303
StreamExecutionEnvironment类的方法解析，java代码
Flink笔记
weixin_49113403的博客
02-01 1914
其实就是实现FilterFuntion方法之类的Rich Funtion函数类，RichReduceFuntion,RichFilter Function等只要带Rich的，就可以获取上下文环境和生命周期方法例如open（）和close（）方法open（）初始化，只会在算子运行之前调用一次，有多个并行度，调用多次close（），一般用来做一些清理工作getRuntimeContext（），获取上下文的信息重写 invoke方法。
解决Flink工程导入问题：StreamExecutionEnvironment类缺失
`StreamExecutionEnvironment` 是 Apache Flink 的一个核心类，用于配置和启动数据流处理作业。 出现“类找不到”的错误提示，通常意味着项目中缺少了对应的依赖声明，或者声明了错误的依赖版本。有时，开发者可能...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值