qq_35901141的博客

Flink核心架构如下图所示和Spark类似，Flink也是采用了Master-slave的主从架构模型，主要包含三个模块，Client，Jobmanager，TaskManager。下面我将依依介绍各个模块的功能。1.ClientClient 不是运行时和程序执行的一部分，而是用于准备数据流并将其发送给 JobManager。之后，客户端可以断开连接（分离模式），或保持连接来接收进程报告（附加模式）。客户端可以作为触发执行 Java/Scala 程序的一部分运行，也可以在命令行进程./bin/fl

配置flink进程的内存配置总内存Flink JVM 进程的*进程总内存（Total Process Memory）*包含了由 Flink 应用使用的内存（Flink 总内存）以及由运行 Flink 的 JVM 使用的内存。 Flink 总内存（Total Flink Memory）包括 JVM 堆内存（Heap Memory）和堆外内存（Off-Heap Memory）。 其中堆外内存包括直接内存（Direct Memory）和本地内存（Native Memory）。[外链图片转存失败,源站可能有防

人们都说官网是最好的学习资料，我想对于Flink这种眼下最为火热的大数据技术，这点尤为突出，目前Flink官网文档已经绝大部分都有中文翻译，且经过本人实际经历，阅读起来还是非常通畅的，并不像那种直接用谷歌或者百度翻译出来的结果。下面我就介绍一下如何使用Flink官网进行Flink相关技术的学习。1.进入官网https://flink.apache.org/首先进入Flink官网，官网首页有很多选项，有Flink简介，Flink下载，以及Flink文档等等，对于我们学习而言，最重要的就是Flink文档了

当Flink的task发生故障的时候，Flink需要重启出错的task以及其他受到影响的task，以使得作业恢复到正常状态。Flink通过重启策略和故障恢复策略来控制task的重启，重启策略决定是否可以重启，故障恢复策略决定哪些task需要重启。重启策略Flink作业如果没有设置重启策略，则会遵循集群启动时加载的默认的重启策略。如果作业中设置了重启策略，则会覆盖默认的重启策略。通过Flink的配置文件flink-conf.yaml来设置默认的重启策略。配置参数restart-strategy定义了采取

1 、查询列( 字段)select distinct *|字段|表达式 as 别名 from 表 表别名SELECT * FROM 表名; 查询某个表中所有的记录的所有字段信息SELECT 列名 FROM 表名; 查询某个表中所有的记录的指定字段信息SELECT 列名1,列名2 FROM 表名; 查询某个表中所有的记录的字段1 字段2SELECT distinct 列名 FROM 表名;...

HashMap是java开发中最常用的集合框架之一，HashMap 可以说是 Java 中最常用的集合类框架之一，是 Java 语言中非常典型的数据结构，我们总会在不经意间用到它，很大程度上方便了我们日常开发。实现 Map 接口的类用来存储 键(key) －值(value) 对，Map 类中存储的键值对通过键来标识， 所以键值不能重复。Map接口的实现类有HashMap和TreeMap等。一....

一.查询行（记录）where过滤行记录条件 ,条件有：a)、= 、 >、 <、 >=、 <=、 !=、 <>、 between andb)、and 、or、 not、 union、 union all、 intersect 、minusc)、null :is null、 is not null、 not is nulld)、like :模糊查询 % _...