mkfka的博客

这里写目录标题一级目录二级目录三级目录 一级目录 二级目录 三级目录

分布式消息队列——kafkakafka架构kafka工作流程及文件存储kafka生产者kafka消费者kafka高效读写数据zookeeper在kafka中的作用kafka事务常见问题kafka的日志目录结构？如何根据offset找到对应消息？kafka Controller的作用？kafka哪些设计让它有如此高的性能？kafka分区分配策略kafka消息数据积压，kafka消费能力不足怎么处理？ kafka架构 kafka工作流程及文件存储 kafka生产者 kafka消费者 kafka高效读写数据 z.

列式存储Nosql——HBaseHbase介绍Hbase与RDBMS比较Hbase与HDFS比较Hbase与Hive比较Hbase数据模型表（table）行（row）列簇（Column Family）列标识符（Column Qualifier）单元格（Cell）Hbase架构Hbase架构解析Hbase读写过程Hbase二级索引Hbase的过滤器类型Hbase优化Row key的设计列簇的设计常见问题为什么要按列存储？按列存储有什么好处？ Hbase介绍 HBase是BigTable的开源java版本。是.

分布式缓存——redisredis概述redis的数据类型stringhashsetlistzsetredis的持久化RDBAOFredis的事务redis的过期策略定时过期惰性过期定期过期redis的淘汰策略redis的高可用主从复制哨兵模式redis集群redis常见问题缓存穿透缓存击穿缓存雪崩 redis概述 redis的数据类型 string hash set list zset redis的持久化 RDB AOF redis的事务 redis的过期策略 定时过期 惰性过期 定期过期 redis的淘

数据仓库——hive数据仓库的概念数据仓库与数据库的区别数据仓库的分层架构hive工作流程将sql解析为MapReducehive表的类型管理表内部表外部表hive表的结构分区表分桶表hive中的join与排序join排序hive的优化hive中的数据倾斜 数据仓库的概念 数据仓库与数据库的区别 数据仓库的分层架构 hive工作流程 将sql解析为MapReduce hive表的类型 管理表 内部表 外部表 hive表的结构 分区表 分桶表 hive中的join与排序 join 排序 hive的优化 hiv

分布式计算框架——MapReduce一级目录二级目录三级目录 一级目录 二级目录 三级目录

YARN——分布式资源管理与任务调度框架YARN的架构与运行机制YARN的架构ResourceManager管理节点NodeManager计算节点YARN的运行机制YARN的资源管理与任务调度YARN的资源管理YARN的任务调度机制FIFO调度器（FIFO Scheduler）容量调度器(Capacity Scheduler)公平调度器（Fair Scheduler） YARN的架构与运行机制 YARN是hadoop的集群资源管理系统。YARN被引入hadoop2，最初是为了改善MapReduce的实现，但

这里写目录标题一级目录二级目录三级目录 一级目录 二级目录 三级目录

hadoop HA架构一级目录二级目录三级目录 一级目录 二级目录 三级目录

Zookeeper内容详解一、什么是Zookeeper?1.1 文件系统1.2 watch监听机制二、zookeeper的特性三、zookeeper的集群角色四、zookeeper的节点类型五、zookeeper的选举机制六、常见问题1、什么是脑裂？Zookeeper是怎么解决脑裂问题的？2、为什么集群最好是奇数？为什么集群数量要大于3？ 在了解Zookeeper之前，我们来先了解一下，在大数据中，集群与分布式的区别。 分布式（distributed是指在多台不同的服务器中部署不同的服务模块，通过远程调用.