一个数据块在 DataNode 上以文件形式存储在对应服务器的磁盘上,包括两
个文件,一个是数据本身,一个是元数据包括数据块的长度,块数据的校验和,
以及时间戳。
DataNode 启动后向 NameNode 注册,通过后,周期性(1 小时)的向 NameNode
上报所有的块信息。
心跳是每 3 秒一次,心跳返回结果带有 NameNode 给该 DataNode 的命令如复
制块数据到另一台机器,或删除某个数据块。如果超过 10 分钟没有收到某个
DataNode 的心跳,则认为该节点不可用。
集群运行中可以安全加入和退出一些机器。
HDFS之DataNode工作机制
最新推荐文章于 2025-04-12 23:44:50 发布