- 博客(3)
- 收藏
- 关注
原创 Hadoop之namenode和datanode通信机制
通信导图 注:如果namenode检测到某台节点停止的心态汇报,则会持续再检测十次,如果还没有的话会在五分钟后ping该节点,ping不通的话会在等五分钟再次ping,如果还是ping不通的话则宣布该节点宕机。 宣布一台节点宕机用时10分30秒! ...
2020-09-11 11:29:18
865
原创 Hadoop之HDFS上传数据流程,简单明了
简单描述HDFS上传数据的流程并附简易图: HDFS上传文件流程(写数据流程): 1.比如客户端现在需要上传一个300M的文件,客户端得先请求namenode,告诉它我要上传这个300M的文件。 2.namenode会根据datanode注册时汇报自己的存储状态来判断客户端能否上传,能的话会返回一个OK给客户端。 3.这是客户端会根据自己的文件大小物理切快(默认以128M切割),再请求namenode,请求上传第一块数据。 4.namenode收到请求后会根据datanode的存储状态,向客户端返回可用的三
2020-08-16 21:18:45
1188
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅