
hdfs
玩玩大数据
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
HDFS读写理解
几个概念block一般设为128m,hdfs是按块存储的packetpacket是第二大的单位,它是client端向datanode,或者 datanode之间传输数据的基本单位,默认是 64kchunkchunk是最小的单位,它是client向DataNode,或DataNode的PipLine之间进行数据校验的基本单位,默认512Byte,因为用作校验,故每个chunk...原创 2019-07-23 17:57:58 · 325 阅读 · 0 评论 -
HDFS四大机制
目录1 心跳机制2 安全模式3 机架策略4 负载均衡负载均衡算法:一共有七步阈值管理负载均衡操作1 心跳机制hdfs启动之前,要做集群的时间同步datanode每三秒向namenode发送心跳包,可配置,在hdfs-default.xml中配置,heartbeat.intervalnamenode如果有10次没有收到心跳包,就发起检查,一次检查5分钟...原创 2019-07-23 09:09:32 · 332 阅读 · 0 评论