flink
关注
分享
扫一扫
一起喝芬达2010
Java/Python/分布式架构/大数据/数仓/Linux/数据分析
展开
-
Apache Flink 简单易懂渐进式学习教程(二): 流计算DataStream教程: 接 wikiedits数据
一，前言：Wikipedia提供了一个IRC通道，其中会记录所有用户对Wiki编辑。我们将在Flink中读取此通道，并计算每个用户在给定时间窗口内编辑的字节数。用flink实现如上功能将非常简单便捷，通过本次的学习希望对flink的认知更进一步，从而有能力写出更为复杂的专业应用。二，快速构建maven工程使用Flink Maven Archetype来创建我们的项目结构，运行命令如下：...原创 2019-07-15 16:59:53 · 674 阅读 · 0 评论 -
Apache Flink 简单易懂渐进式学习教程(一)： 单节点安装教程和验证
目录一，准备工作二，安装三，启动单节点flink四，验证五，关闭单节点flink一，准备工作1，jdk的安装和验证Flink可在Linux，Mac OS X和Windows上运行。为了能够运行Flink，要求安装Java 8.x。安装教程：https://www.t9vg.com/archives/346通过以下命令来检查Java的正确安装...原创 2019-07-12 16:04:49 · 907 阅读 · 0 评论 -
Apache Flink 渐进式学习教程(五):程序和数据流结构、支持的数据类型
目录Flink 程序与数据流结构Flink支持的数据类型1. 原生数据类型2. Java Tuples类型3. Scala Case Class类型4. POJOs类型5. Flink Value类型6. 特殊类型Flink 程序与数据流结构Flink 应用程序结构就是如上图所示：Source: 数据源，Flink 在流处理和批处理上的 ...原创 2019-07-29 15:50:40 · 332 阅读 · 0 评论 -
Apache Flink 简单易懂渐进式学习教程(三)：Standalone Cluster 集群部署
目录前言：集群规划一，安装要求二，安装前言：集群规划一，安装要求1，环境要求centos7.x 三台 : docker01 , docker02 , docker03Java 1.8.x或更高版本，JDK安装：https://www.t9vg.com/archives/346ssh（必须运行sshd才能使用管理远程组件的Flink脚本）2，下载flink...原创 2019-07-22 17:23:36 · 407 阅读 · 0 评论 -
Apache Flink 渐进式学习教程(四) : Flink基础架构和组件详解
目录一，Apache Flink 是什么？二，Apache Flink的组件栈三，Apache Flink的基础架构四，Apache Flink 的编程接口一，Apache Flink 是什么？Apache Flink 是一个分布式流批一体化的开源平台。Flink 的核心是一个提供数据分发、通信以及自动容错的流计算引擎。Flink 在流计算之上构建批处理，并且原生的支...原创 2019-07-27 17:57:55 · 520 阅读 · 0 评论