weijiasheng的博客

yarn.nodemanager.local-dirs: 这个目录是nodemanager上的作业中间数据存放路径，默认是 10G大小 ； yarn.nodemanager.local-dirs，我们一般配置多个目录 ，几个磁盘就几个目录 <property> <name>yarn.nodemanager.localizer.cache.target-si...

1.简介 hdfs federation即hdfs的联邦，可以简单理解为多个hdfs集群聚合到一起，更准确的理解是有多个namenode节点的hdfs集群 hadoop1.x的hdfs架构 主要由namespace（命名空间）和Block Storage（块的存储）两层组成 1.1.namespace 由目录、文件、块组成。 支持创建、删除、修改、列举命名空间相关系统的操作 1.2.Block ...