超全笔记:HDFS,MAPREDUCE,YARN,HIVE
NameNode,DataNode,SecondaryNameNode角色NameNode:基于内存存储文件元数据(metadata)、block映射元数据:/path/path/xxx.txt 128M root:root 2021.10… rwxrwxrw映射(比如xxx.ttt): xxx_bk1 node1 node3,xxx_bk2 node1 node2DataNode:基于本地磁盘存储block(每个块以文件形式存储),保存block块的校验,与NameNode维持心跳汇报bl
原创
2022-02-09 14:40:10 ·
4338 阅读 ·
0 评论