Flink学习笔记：Flink的最简安装

已于 2024-10-31 18:58:55 修改
阅读量931 收藏 1
点赞数 1
CC 4.0 BY-SA版权
分类专栏： 探索大数据-从Hadoop到Flink 文章标签： flink flink shell 词频统计
于 2022-07-12 09:18:01 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/howard2005/article/details/125735473
本文详细介绍了Flink的最简安装步骤，包括获取安装包、上传、解压和配置环境变量。接着，通过Flink Shell演示了如何实现词频统计，从准备数据文件到启动本地服务，再到执行统计命令。此外，文章还阐述了Flink程序开发的基本流程、注意事项和延迟计算的优势。最后，提供了Java和Scala版Flink项目的创建、依赖配置、数据文件准备、日志属性文件创建以及程序运行和结果查看的完整过程。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

文章目录

一、Flink概述

在这里插入图片描述

二、Flink的最简安装

（一）获取flink安装包

  • flink-1.10.2-bin-scala_2.11.tgz
    在这里插入图片描述

（二）上传flink安装包

  • 将flink安装包上传到master虚拟机/opt目录
    在这里插入图片描述

（三）解压flink安装包

  • 执行命令：tar -zxvf flink-1.10.2-bin-scala_2.11.tgz -C /usr/local
了解本专栏 订阅专栏 解锁全文 超级会员免费看
Flink学习笔记：搭建Flink on Yarn环境并运行Flink应用
howard2005的专栏
04-20 1589
搭建Flink on Yarn集群，几种方式运行Flink应用
Flink学习笔记03：将项目打包提交到Flink集群上运行（Java版）
howard2005的专栏
03-24 2762
创建项目、打包项目、提交到Flink集群运行
Flink与Spring Boot的集成
热门推荐
凌晨港口
03-14 2万+
flink 1.10.0 spring boot 2.2.2.RELEASE 这方面的资料很少，网上有的方法不完整。基本思路是把spring容器的初始化放在sink的open方法中执行。 要么只使用spring framework组件，甚至使用xml这样的方式配置bean（使用ClassPathXmlApplicationContext ）；要么直接在open中启动了SpringApplica...
flink入门_Flink快速入门
weixin_39884412的博客
11-20 313
第1章针对Flink的基本原理、架构和组件进行了分析，本章开始快速实现一个Flink的入门案例，这样可以加深对之前内容的理解。2.1　Flink开发环境分析2.1.1　开发工具推荐在实战之前，需要先说明一下开发工具的问题。官方建议使用IntelliJ IDEA，因为它默认集成了Scala和Maven环境，使用更加方便，当然使用Eclipse也是可以的。开发Flink程序时，可以使用Java或者Sc...
【hadoop】Flink安装部署
最新发布
2401_83769134的博客
06-05 771
Apache Flink 是一个框架和分布式处理引擎，用于无界和有界数据流进行有状态的计算。Flink能在所以常见集群环境中运行，并以内存速度和任意规模进行计算。
flink集成springboot案例_Spring Boot整合Flink
weixin_29491635的博客
12-23 1847
软件版本:Spring Boot 2.1.6+Flink1.6.1+JDK1.8程序主体：@SpringBootApplicationpublic class HadesTmsApplication implements CommandLineRunner {public static void main(String[] args) {SpringApplication application ...
Flink 快速入门
csgeorge2016的博客
03-13 279
也可以用来做流处理，即实时的处理些实时数据流，实时的产生数据流结果，只要数据源源不断的过来，Flink 就能够一直计算下去，这个 Source 就是数据的来源地。Checkpoint 是 Flink 实现容错机制最核心的功能，它能够根据配置周期性地基于 Stream 中各个 Operator/task 的状态来生成一个轻量级的分布式快照，从而将这些状态数据定期持久化存储下来，当 Flink 程序一旦意外崩溃时，重新运行程序时可以有选择地从这些快照进行恢复，从而修正因为故障带来的程序数据异常。
Flink学习笔记.docx
05-07
Flink 学习笔记 Apache Flink 是近年来越来越流行的一款开源大数据计算引擎，它同时支持了批处理和流处理。Flink 的主要特点是它可以实时处理大规模数据，并且可以与其他大数据处理工具集成，例如 Hadoop、Spark 等...
flink学习笔记脑图
04-27
flink学习脑图资源
flink快速入门
04-07
Apache Flink是一个面向分布式数据流处理和批量数据处理的开源计算平台，它能够基于同一个Flink运行时，提供支持流处理和批处理两种类型应用的功能。
Flink快速入门
DevinKim的博客
08-29 1411
Flink快速入门 文章目录Flink快速入门一.Flink介绍(一)Flink简介(二)对比Flink、Spark、Storm(三)Flink生态圈(四)编程模型二.Flink环境搭建(一)Standalone集群模式(二)高可用HA模式(三)YARN模式1.YARN Session模式2.分离模式三.批处理常用API(一)入门案例WordCount(二)Flink Source数据源(三)Fi...
Springboot整合Flink
m0_67393686的博客
04-08 4522
1,引入Flink相关依赖包 2，项目启动的时候实现Flink持续处理数据的过程 3，创建类MySink继承RichSinkFunction类，实现处理数据的方法 4，综上所述即为springboot整合Flink的步骤，实现了从接收数据到处理数据的全过程。 ...
再也不担心写出臃肿的Flink流处理程序啦，发现一款将Flink与Spring生态完美融合的脚手架工程-懒松鼠Flink-Boot
懒松鼠Flink
12-04 2236
文章目录你可能面临如下苦恼：接口缓存重试机制Bean校验等等......它为流计算开发工程师解决了有了它你的代码就像这样子：仓库地址：[懒松鼠Flink-Boot](https://github.com/intsmaze/flink-boot)1. 组织结构2. 技术选项和集成情况3. 快速开始3.1 核心基础工程3.2 Spring容器topology-base.xmlconfig.properties3.3 启动类示例3.4 数据源3.5 业务逻辑实现CommonFunction3.6 集群/本地运行
Flink Java版学习笔记：入门到精通详解
资源摘要信息: "本读书笔记内容聚焦于Apache Flink Java API的深入学习与应用，旨在指导读者从基础知识入门，逐步掌握到精通Flink技术的高级应用。Flink作为一个开源的流处理框架，支持高吞吐、低延迟的数据处理和大...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

酒城译痴无心剑

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值