Hadoop 源码解析 No.1 NameNode

郑斯道

于 2017-12-26 12:26:38 发布

阅读量343

点赞数 1

CC 4.0 BY-SA版权

分类专栏： hadoop

本文链接：https://blog.youkuaiyun.com/zhengshidao/article/details/78900881

9 篇文章

订阅专栏

本文介绍了Hadoop 2.9版本中NameNode的启动过程及核心功能，详细解析了NameNode如何管理文件系统的命名空间和数据块分配。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

注：本人使用的版本是 2.9，并且确保你的机器上已经安装了Source

在新版的Hadoop 当中启动模式已经从

$bin/hadoop  ⇒  $bin/hdfs

我们打开这个文件：

if [ "$COMMAND" = "namenode" ] ; then
CLASS='org.apache.hadoop.hdfs.server.namenode.NameNode'
HADOOP_OPTS="$HADOOP_OPTS $HADOOP_NAMENODE_OPTS"

可以看到最终指向的是 org.apache.hadoop.hdfs.server.namenode.NameNode 方法。

打开对应的文件，可以看到官方给的注释。

每一个HDFS系统都包含有一个单一的 “namenode” (在这里备份的 namenode 不算)。 NameNode 可以作为HDFS中文件目录和文件分配的管理者，保存最重要的东西，主要有这两个：

 1. 文件名    ⇒  块序列（命名空间）
 2. 数据块    ⇒  机器列表(inode)

其中文件到数据块映射保存在 namenode 当中，而数据块到机器映射关系则由 DataNode 上报之后建立起来。

未完待续