Flink导入IDEA&源码构建Flink

最新推荐文章于 2025-02-06 17:49:18 发布
最新推荐文章于 2025-02-06 17:49:18 发布
阅读量2.7k 收藏 15
点赞数 2
分类专栏： Flink学习 Linux 文章标签： java maven linux git flink
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/PanicJaw/article/details/107328218
版权
本文档详细介绍了如何将Flink源码导入IDEA并进行编译。首先，需克隆Flink源码到本地，并在Windows环境下配置Git代理。接着，在IDEA中安装Scala插件，导入Flink项目并配置Maven。在解决可能出现的插件和依赖问题后，通过执行特定的Maven命令进行项目构建。文章还提供了常用Maven命令和编写简短Flink程序的参考，帮助读者验证编译是否成功。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Flink导入IDEA&源码构建Flink

因为涉及到可能要更改源码，和最后在集群上跑实验，所以整理一下打包运行和源码编译的过程。

根据官网整理

导入Flink到IDE中并且编译

  1. 将Flink源码clone到本地git clone https://github.com/apache/flink.git

    在windows下需要安装git，并且在cmd使用git命令时，因为国内访问速度慢，如果配置代理的话，可以参考这篇博客配置cmd中代理。

    在目标文件夹中可以得到flink命名的文件，其中内容为：

    image-20200713092749949

  2. 本地IDE推荐IDEA，安装好需要进行一些配置

    • 安装Scala plugin，在sett

最低0.47元/天 解锁文章
如何在 IDEA 中 Debug Flink 1.12 SQL Client 源码？
http://www.54tianzhisheng.cn/
12-29 688
点击上方 "zhisheng"关注,星标或置顶一起成长Flink 从入门到精通系列文章前言此文章主要如何配置使能在idea 中debug模式启动flink sqlCl...
Flink学习笔记 --- Intellij自动导入
杨鑫newlife的专栏
07-03 1631
Flink学习笔记 --- Intellij自动导入
IntelliJ IDEA导入项目手册及问题总结【Flink代码为例】.pdf
05-21
IDEA越来越流行，同时Flink企业已经开始普及，也收到大家的关注，后面我们要开始补充一些Flink的知识。为了后面打下基础，我们你这里交给大家如何使用IDEA。IDEA最重要的是导入项目，然后运行。这是我们学习Flink的开端。
Flink开发——导入 Flink 到 IDE 中
京河小蚁的博客
07-07 1467
以下章节描述了如何将 Flink 项目导入到 IDE 中以进行 Flink 本身的源码开发。有关 Flink 程序编写的信息，请参阅 Java API 和 Scala API 快速入门指南。每当你的 IDE 无法正常工作时，请优先尝试使用 Maven 命令行（mvn clean package -DskipTests），因为它可能是由于你的 IDE 中存在错误或未正确设置。要开始，请首先从我们的库中下载Flink源代码，例如。 以下指南是为IntelliJ IDEA 2020.3编写的。一些细节在其他版本中
Flink-WordCount源码解析
最新发布
lu070828的博客
02-06 1178
1、解析输入参数2、为Flink应用程序创建执行环境，该环境提供了控制作业执行（如设置并行性或容错/检查点参数）和与外部交互（数据访问）的方法。3、为环境设置执行模式，默认为STREAMING4、将Flink UI中的参数设置到环境中5、根据输入文件创建DataStreamSource<String>（它表示DataStream的起点），如果输入参数没有设置则用事先在内存中准备好的数据，这是整个程序第一个DataStream，像Spark程序一样可以使用算子将其转化成其他DataStream。
IDEA上运行Flink任务
热门推荐
程序员欣宸的博客
04-11 1万+
将最简单的flink任务在IDEA上开发和运行，为后面的深入学习和实践打好基础。
【Flink---02】Flink开发环境：IDEA
渐渐的忘记，赶不上明天（读研ing，2024年毕业）
12-26 3528
第一步：创建项目 第二步：编辑pom.xml文件 第三步：配置日志 第四步：编写代码 (1) 数据准备 (2) 方式一：批处理 (3) 方式二：流处理 * 以有界流的方式 * 以无界流的方式
Flink源码导入intellij过程
TIMELIMITE的专栏
01-19 3212
##Flink源码导入intellij过程 在intellij中添加scala插件 下载源码,选择Source中的版本 解压源码,在intellij工具栏new file选择project existing source,选则解压后的文件, 选择maven导入,勾中 search for project recuisively import Maven projects automatical...
在idea中运行flink程序所需要lib
11-19
在开发Apache Flink项目时，Idea（IntelliJ IDEA）是一个常见的集成开发环境选择，它提供了丰富的功能来支持Flink程序的编写、构建和运行。"在idea中运行flink程序所需要lib"这一主题主要涉及到如何配置Idea以便顺利...
【Flink入门修炼】1-2 Mac 搭建 Flink 源码阅读环境
笨鸟先飞的博客
02-06 1313
在后面学习 Flink 相关知识时，会深入源码探究其实现机制。因此，需要现在本地配置好源码阅读环境。 本文搭建环境： ● Mac M1（Apple Silicon） ● Java 8 ● IDEA ● Flink 官方源码
flink fi java_IDEA上运行Flink任务
weixin_39590635的博客
02-26 235
基于apache flink的流处理实时模型44元包邮(需用券)去购买 >欢迎访问我的GitHubhttps://github.com/zq2599/blog_demos内容：所有原创文章分类汇总及配套源码，涉及Java、Docker、Kubernetes、DevOPS等；IDEA是常用的IDE，我们编写的flink任务代码如果能直接在IDEA运行，会给学习和开发带来很大便利，例如改完代码立...
追源索骥：透过源码看懂Flink核心框架的执行流程
11-07
追源索骥：透过源码看懂Flink核心框架的执行流程 不错的源码分析
flink源码在开发工具(idea)中编译运行
2301_78556605的博客
08-03 334
4、依赖包下载耗时10分钟左右。下载完成，根据自己本机的实际情况，如果本机的JDK是1.8，则点击右侧maven-->Profiles，取消勾选java11，否则运行单元测试会报错： 无效的标记: --add-exports=java.base/sun.net.util=ALL-UNNAMED。取消勾选后，可能依然还会报这个错误，file-->invalid cache重新打开。解决办法是：在settings.xml文件中，将镜像地址都注释掉，5、若如下包不能下载，提示报错，可从如下地址下载（
Windows环境下idea编译flink1.7.2源码
weixin_42412645的博客
06-15 1789
最近看了了flink很多知识，于是决定编译一下源码，方便以后的学习。 1.官网下载flink1.7.2源码，解压 2.将源码导入idea 3.查看一下idea有没有安装代码检查插件和相应的设置。可以参照官网。不然会报错。我这里没有设置IDE的配置而是在解压的当前目录下执行了maven checkstyle plugin命令。网上我看很多人都是将顶级pom文件这个插件给注释掉了。 执行命令 或者注...
【源码｜编译】flink 12 源码编译及使用idea运行、debug
hiliang521的博客
08-09 1632
flink 源码编译运行
Flink IDEA项目创建
张之海的博客
07-08 1255
1 创建maven项目 创建完成后，项目结构如下图所示： 2 添加最低限度的API依赖 开发Flink程序需要最低限度的API依赖，最低的依赖库包括flink-scala，flink-Streaming-scala。大多数应用需要依赖其他类库或连接器，例如kafka连接器，TableAPI，CEP库等，这些不是Flink核心依赖库的一部分，因此必须作为依赖项手动添加到应用程序中。 打开Flink官网中的，复制最低依赖项： https://ci.apache.org/projects/flink/fl
Flink源码拾遗＜一＞：源码下载、导入与编译
Li_DeSheng的博客
11-06 1475
1、环境准备 JDK：建议使用 java_8u51 以上的java8 JDK，以避免使用 PowerMock Runner 的单元测试失败 maven：小白建议用3.2.5版本（Maven 3.3.x 可以构建 Flink，但是不能正确地屏蔽掉指定的依赖。Maven 3.2.5 可以正确地构建库文件） 安装方法这篇文章讲的很全。 IDE：我用的idea 2021.2 安装后记得在IDEA上修改maven配置，修改为与你的实际设置一样，我的配置如下图 2、源码下载 因为只有windows系..
三 搭建 flink 开发环境(idea)
andy的博客
08-04 1579
文章目录1 在 idea 中添加依赖1.1 在创建目录时添加2 编写代码2.1 创建运行时环境2.2 添加 source生成流2.2.1 fromElements方法专门用几台数据生成流.2.2.2 也可以用socket来生成流:2.3 计算2.4 添加sink2.5 执行程序2.6 编译执行或者打成jar包3 jar在flink上运行3.1 启动 Flink 集群3.2 提交打包好的 JAR 包3.3 停止 Flink 集群3.4 查看标准输出日志的位置，在 log 文件夹中 1 在 idea 中添加依赖
【Flink】第一节 源码编译
Chain的博客
08-19 1638
认识以及改造flink的第一步从下载编译源码开始。
flink 源码分析
01-16
### 关于 Apache Flink 源码分析的资料 #### 资源请求机制解析 在探讨Flink集群与资源管理时，重点在于理解`checkResourceRequirements`函数的工作流程。此函数负责验证并确认由应用提出的资源配置需求是否合理以及...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值