- 博客(3)
- 收藏
- 关注
原创 resourceManager介绍
resourceManager介绍ResourceManager (RM)是一个仲裁整个集群可用资源的主节点,帮助YARN系统管理其上的分布式应用。它同NodeManagers(NMs) 和ApplicationMasters(AMs)一起工作。1、NodeManagers 从ResourceManager获取指令并管理本节点的可用资源2、ApplicationMasters 的职责是从ResourceManager谈判资源,并为NodeManagers启动容器。Resource Manager
2020-10-15 23:43:33
8524
原创 NodeManager
一 概述 NodeManager是运行在单个节点上的代理,它管理Hadoop集群中单个计算节点,功能包括与ResourceManager保持通信,管理Container的生命周期、监控每个Container的资源使用(内存、CPU等)情况、追踪节点健康状况、管理日志和不同应用程序用到的附属服务等。 NodeManager是YARN中单个节点的代理,它需要与应用程序的ApplicationMaster和集群管理者ResourceManager交互;它从ApplicationMaster上接
2020-10-15 23:25:38
3535
原创 HBase存储原理、读写原理
HBase存储原理、读写原理文章目录`HBase`存储原理、读写原理`HBase`存储原理(架构)`HBase`读原理`HBase`写原理HBase存储原理(架构)HBase依赖于Zookeeper和Hadoop的,所以在启动HBase前需要启动Zookeeper和Hadoop。HMaster用于管理整个HBase集群,即管理每个HRegionServer,它掌握着整个集群的元数据信息,同时会将相应的数据存储到Zookeeper(元数据信息、高可用信息等)。HMaster的职责:1)管理用户
2020-08-27 22:37:01
630
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人