木樨

Spark基础什么是Spark基于内存的，用于大规模数据处理（离线计算、实时计算、快速查询（交互式查询））的统一分析引擎。Spark特点快： Spark计算速度是MapReduce计算速度的10-100倍易用：（算法多）MR支持1种计算模型，Spsark支持更多的计算模型。通用： Spark 能够进行离线计算、交互式查询（快速查询）、实时计算、机器学习、图计算等兼容性： Spark支...

1、什么是Yarn通用资源管理系统和调度平台2、Yarn特点：1、支持多计算框架2、资源利用率高，运行成本低，数据共享。3、Yarn的意义：降低了企业硬件的成本（多个集群变成一个集群），减少了资源的了浪费，运营成本低。4、Yarn基本组成ResourceManager ：一个集群资源调度的管理者NodeManager ：一个节点资源调度的管理者（集群各个节点资源的工作者）A...

1、什么是redisRedis是一个基于内存的使用C语言编写的key-value开源的NOSQL存储系统。不支持SQL语句。2、Redis持久化数据的方式有哪些1、RDB 触发式的序列化Save 5 2 (5秒钟 有两个动作便会触发序列化)2、AOF 日志形式的序列化默认：一秒钟存储一次3、解决IT行业数据读取瓶颈的终极方案读写分离4、Redis如何实现读写分离？R...

1、什么是kafkaKafka是一个高吞吐量，分布式，分区的，多副本的，多订阅者的的发布订阅消息系统。2、kafka的使用场景应用耦合、异步处理、限流削峰、消息驱动的系统3、kafka优缺点优点：可靠性强（分布式-分区-副本）、扩展性强（可伸缩）、性能高（数据读写）、耐用性强（数据持久化）、时效性强。缺点：由于是批量发送，数据并非真正的实时。仅支持统一分区内消息有序，无法实现全局消息...