- 博客(4)
- 收藏
- 关注
原创 大数据 Flink部落3
Flink流处理程序总体介绍前期配置Flink程序获取执行环境载入数据对数据进行处理/转换(算子Transformation)设置数据输出方式启动程序,开始执行 (刚入大数据的大门,让每一篇文章陪伴我的成长,希望看了文章的同学能够共同进步,相互交流,也希望发现错误能够指正,也希望能和大家一同交流讨论QQ:1793655668) 前期配置 Java 版本至少是Java 8 必须使用 Maven 3...
2020-04-10 23:16:39
442
原创 大数据 Flink部落2
简单介绍一下FlinkFlink官方定义Flink有多火热大数据流处理系统简要分析批处理和流处理简单谈谈四大框架 (刚入大数据的大门,让每一篇文章陪伴我的成长,希望看了文章的同学能够共同进步,相互交流,也希望发现错误能够指正,也希望能和大家一同交流讨论QQ:1793655668) Flink官方定义 Apache Flink是由Apache软件基金会开发的开源流处理框架,其核心是用Java和Sca...
2020-04-10 22:36:54
287
原创 大数据 Flink部落 1
宏观介绍大数据几个基本概念大数据存储系统大数据批处理系统三级目录 大数据存储系统 大数据两个主要的存储系统:HDFS和Hbase HDFS(Hadoop Distributed File System),作为Google File System(GFS)的实现,是Hadoop项目的核心子项目,是分布式计算中数据存储管理的基础,是基于流数据模式访问和处理超大文件的需求而开发的,可以运行于廉价的商用...
2020-04-01 13:44:46
1388
1
原创 初识大数据
初识大数据1.什么是大数据2.大数据作用3.为什么要用大数据4.大数据相关的组件4.1.1 文件系统4.1.2. 数据存储4.1.3. 内存技术4.1.4. 数据搜集4.1.5. 消息系统4.1.6. 数据处理4.1.7. 查询引擎4.1.8. 分析和报告工具4.1.9. 调度与管理服务4.1.10. 机器学习4.1.11. 开发平台 1.什么是大数据 大数据也可以定义为来自各种来源的大量非结构化...
2020-04-01 11:42:07
1496
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人