weixin_40434214的博客

hdfs分布式系统的工作流程 1、NameNode功能 管理元数据 元数据格式：NameNode(FileName,replicas,block-ids,id2host…) NameNode对数据的管理采用了三种存储形式： 内存元数据(NameSystem) ​ 磁盘元数据镜像文件(fsImage) ​ 数据操作日志文件（可通过日志运算出元数据） 维护目录树 接受客户端请求 2、f...

HDFS的读写流程 1、HDFS的写操作 1、客户端向namenode请求上传文件，namenode检查目标文件是否已存在，父父目录是否存在 2、namenode返回是否可以上传 3、客户端请求第一个block上传到哪几个DataNode服务器上 namenode返回3个DataNode节点，分别为dn1，dn2，dn3 4、客户端请求dn1上传数据，dn1收到请求之后会继续调用dn2，dn2调...