xiaoxu_xiaoyou的博客

rabbitmq的几种工作模式simple简单模式消息生产者（p）将消息放入队列中消息的消费者（c）监听 消息队列，如果队列中有消息，就消费掉，消息被拿走后，自动从队中删除，可能会造成消息丢失work工作模式（资源竞争）消息生产者将消息放入队列，消费者可以有多个，消费者1，消费者2，同时监听同一个队列，需要确保一条消息只能被一个消费者消费publish/subscribe...

hadoop三大核心hdsf集群（分布式文件系统）yarn集群（数据计算资源调度）mapreduce（分布式计算）1、1.x版本模型文件系统核心模块（主从架构）NameNode集群中的主节点，存储元数据（文件位置、文件大小、文件权限），也管理集群当中的各种数据，相当于文件系统的大脑，在1.x版本中NameNode服务宕机整个服务则瘫痪SecondaryNameNo...

Zookeeper1、Zookeeper概述Zookeeper是一个开源的分布式协调服务框架，主要用来解决分布式集群中应用系统中的一致性问题和数据管理问题2、Zookeeper的特点Zookeeper本质上是一个分布式文件系统，适合存放小文件，也可以理解为一个数据库，简言之其核心是一个精简的文件系统高可用性松耦合的交互方式富表现性（分布式队列、选举机制等）3、Zookeeper......

1、HDFS简介在现代的企业环境中，单机容量往往无法存储大量数据，需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统 。HDFS（Hadoop Distributed File System）是 Apache Hadoop 项目的一个子项目. Hadoop 非常适于存储大型数据 (比如 TB 和 PB), 其就是使用 HDFS 作为存储系统. HDFS 使用多台计算机存储文...

1、HDFS高可用1.2、组件分析JournalNode共享式存储系统​ 特点：自身高可用、强一致性在Hadoop-2.x使用Quorum Journal Manager（QJM）来实现操作日志的共享，QJM是一个比Zookeeper更轻量级的分布式存储系统，所使用的一致性约束条件远远不如paxos，raft等高可用的一致性算法。​Zookeeper辅助namenode实现...