
Hadoop
码动乾坤
求知若饥,虚心若愚
展开
-
正常工作的Hadoop集群中Hadoop都分别需要启动哪些进程,它们的作用分别是什么?
1)NameNode它是hadoop中的主服务器,管理文件系统名称空间和对集群中存储的文件的访问,保存有metadate。2)SecondaryNameNode它不是namenode的冗余守护进程,而是提供周期检查点和清理任务。帮助NN合并editslog,减少NN启动时间。3)DataNode它负责管理连接到节点的存储(一个集群中可以有多个节点)。每个存储数据的节点运行一个datanod...原创 2018-12-04 22:28:57 · 19722 阅读 · 0 评论 -
Hadoop中需要哪些配置文件,其作用是什么
1)core-site.xml:(1)fs.defaultFS:hdfs://cluster1(域名),这里的值指的是默认的HDFS路径 。(2)hadoop.tmp.dir:/export/data/hadoop_tmp,这里的路径默认是NameNode、DataNode、secondaryNamenode等存放数据的公共目录。用户也可以自己单独指定这三类节点的目录。(3)ha.zo...原创 2018-12-04 22:30:47 · 5924 阅读 · 0 评论