nameNode保存文件在集群中的存信息,一但nameNode挂掉,整个集群就完了,所以要做好对nameNode的备份。(恢复时,将name目录里的文件都copy到备份机器上,配制好和nameNode相同的运行环境就行了)。
1.用linux的DFS系统备份到其它机器上,修改hadoop-site.xml里的dfs.name.dir增加:
<property>
<name>dfs.name.dir</name>
<value>/home/hadoop/name/,/mnt/nn_bp/</value>
</property>
2.Secondary NameNode节点的处理。
Secondary NameNode通过bin/start-dfs.sh在conf/masters中指定的节点上启动,目录配制为:fs.checkpoint.dir
<property>
<name>fs.checkpoint.dir</name>
<value>${hadoop.tmp.dir}/dfs/namesecondary(默认配制,可以改成其它机器上的指定directory)</value>
</property>
注:以后的设置,在必须是在nameNode格式化之后才能配制,否则format不能成功。
1.用linux的DFS系统备份到其它机器上,修改hadoop-site.xml里的dfs.name.dir增加:
<property>
<name>dfs.name.dir</name>
<value>/home/hadoop/name/,/mnt/nn_bp/</value>
</property>
2.Secondary NameNode节点的处理。
Secondary NameNode通过bin/start-dfs.sh在conf/masters中指定的节点上启动,目录配制为:fs.checkpoint.dir
<property>
<name>fs.checkpoint.dir</name>
<value>${hadoop.tmp.dir}/dfs/namesecondary(默认配制,可以改成其它机器上的指定directory)</value>
</property>
注:以后的设置,在必须是在nameNode格式化之后才能配制,否则format不能成功。
本文介绍了Hadoop集群中NameNode的重要性和备份方法。通过修改hadoop-site.xml配置文件增加备份路径,并设置SecondaryNameNode来确保NameNode故障时的数据恢复。这些措施对于保持Hadoop集群的稳定运行至关重要。
1358

被折叠的 条评论
为什么被折叠?



