
flink
一起喝芬达2010
Java/分布式架构/高可用服务/金融风控
Hadoop/大数据架构/数仓建模/数据引擎
Python/数据分析/深度学习/大模型技术
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Apache Flink 简单易懂渐进式学习教程(二): 流计算DataStream教程: 接 wikiedits数据
一,前言: Wikipedia提供了一个IRC通道,其中会记录所有用户对Wiki编辑。我们将在Flink中读取此通道,并计算每个用户在给定时间窗口内编辑的字节数。用flink实现如上功能将非常简单便捷,通过本次的学习希望对flink的认知更进一步,从而有能力写出更为复杂的专业应用。 二,快速构建maven工程 使用Flink Maven Archetype来创建我们的项目结构,运行命令如下:...原创 2019-07-15 16:59:53 · 694 阅读 · 0 评论 -
Apache Flink 简单易懂渐进式学习教程(一): 单节点安装教程和验证
目录 一,准备工作 二,安装 三,启动单节点flink 四,验证 五,关闭单节点flink 一,准备工作 1,jdk的安装和验证 Flink可在Linux,Mac OS X和Windows上运行。为了能够运行Flink,要求安装Java 8.x。 安装教程:https://www.t9vg.com/archives/346 通过以下命令来检查Java的正确安装...原创 2019-07-12 16:04:49 · 944 阅读 · 0 评论 -
Apache Flink 渐进式学习教程(五):程序和数据流结构、支持的数据类型
目录 Flink 程序与数据流结构 Flink支持的数据类型 1. 原生数据类型 2. Java Tuples类型 3. Scala Case Class类型 4. POJOs类型 5. Flink Value类型 6. 特殊类型 Flink 程序与数据流结构 Flink 应用程序结构就是如上图所示: Source: 数据源,Flink 在流处理和批处理上的 ...原创 2019-07-29 15:50:40 · 366 阅读 · 0 评论 -
Apache Flink 简单易懂渐进式学习教程(三):Standalone Cluster 集群部署
目录 前言:集群规划 一,安装要求 二,安装 前言:集群规划 一,安装要求 1,环境要求 centos7.x 三台 : docker01 , docker02 , docker03 Java 1.8.x或更高版本,JDK安装:https://www.t9vg.com/archives/346 ssh(必须运行sshd才能使用管理远程组件的Flink脚本) 2,下载flink...原创 2019-07-22 17:23:36 · 430 阅读 · 0 评论 -
Apache Flink 渐进式学习教程(四) : Flink基础架构和组件详解
目录 一,Apache Flink 是什么? 二,Apache Flink的组件栈 三,Apache Flink的基础架构 四,Apache Flink 的编程接口 一,Apache Flink 是什么? Apache Flink 是一个分布式流批一体化的开源平台。Flink 的核心是一个提供数据分发、通信以及自动容错的流计算引擎。Flink 在流计算之上构建批处理,并且原生的支...原创 2019-07-27 17:57:55 · 551 阅读 · 0 评论