Hadoop HDFS-知识技能图谱（总结篇）

作者介绍：简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我，下面的思维导图也是预计更新的内容和当前进度(不定时更新)。

中间件，我给它的定义就是为了实现某系业务功能依赖的软件，包括如下部分:

Web服务器

代理服务器

ZooKeeper

Kafka

RabbitMQ

Hadoop HDFS（本章节）

1.Hadoop 三件套：存、算、调度的分布式基石，介绍大数据领域里面很重要的3个核心组件：hdfs，yarn，MapReduce。

2.Hadoop HDFS-基本介绍，重点介绍hdfs的核心组件和功能。

3.Hadoop HDFS-部署和基本操作，单机部署及基本上传下载文件。

4.Hadoop HDFS-NameNode（nn）详细介绍，元数据，控制节点。

5.Hadoop HDFS-DataNode（dn）详细介绍，数据真实存储节点，

6.Hadoop HDFS-SecondaryNameNode（2nn）详细介绍，单机下的保证nn节点效率提升神器。

7.Hadoop HDFS-JournalNode（jn）详细介绍，集群下用来保证事务日志和快照高可用的实现。

8.Hadoop HDFS-ZKFailoverController（ZKFC）详细介绍，集群模式下nn节点高可用切换逻辑。

9.Hadoop HDFS-高可用集群部署，依赖ZooKeeper的高可用部署。

10.Hadoop HDFS-高可用集群验证，集群部署下的核心组件的高可用逻辑验证。

11.Hadoop HDFS-设计哲学（分块&副本），分块存储才是保证能够存储大数据的逻辑，副本是高可用的保证。

12.Hadoop HDFS-读写流程，读写都是先到nn，再到dn。

13.Hadoop HDFS-端口&web管理，web进行集群查看和关联。

14.Hadoop HDFS-配额（Quotas），配额是保证集群的健壮性的重要的手段。

15.Hadoop HDFS-快照（Snapshots），快照是保护数据安全的重要手段之一。

16.Hadoop HDFS-回收站（Trash），回收站也是保护数据安全的重要手段之一。

17.Hadoop HDFS-用户 （User），用户是hdfs里面一种隔离机制。

18.Hadoop HDFS-认证（Kerberos） 简介及入门，一种特殊的认证协议介绍

19.Hadoop HDFS-认证（Kerberos） 部署与配置，部署和基本操作。

20.Hadoop HDFS-认证（Kerberos）集成到hdfs，欠大家的，还没验证成功。

21.Hadoop HDFS-追加（Append）写入模式，一种特殊的写入模式，非一次性写入。

22.Hadoop HDFS-监控（monitor），基本就是通过命令查询集群状态。

23.Hadoop HDFS-常用运维命令，基本上就是前面操作步骤的集合。

24.Hadoop HDFS-知识技能图谱（总结篇）

运维小路

一个不会开发的运维！一个要学开发的运维！一个学不会开发的运维！欢迎大家骚扰的运维！

关注微信公众号《运维小路》获取更多内容。