超级会员免费看
然后我们再来看一下yarn的基础架构,之前我们已经说了,在搭建集群的时候,但是现在
我们再拿出来说一下,
比如上面我们有一个集群,那么
可以看到有这么多的机器,我maptask要运行了,要分配到哪个机器上去运行呢?
可以看到要管理这些,就需要用到yarn,yarn类似于一个分布式的操作系统,而MapReduce,等运算的程序,就相当于运行在这个操作系统之上的应用程序.
yarn可以准确的分配资源,让整个集群,平均,稳定的执行. 
然后我们去看看y
本文详细介绍了Hadoop3.x中的YARN（Yet Another Resource Negotiator）基础架构。YARN作为分布式操作系统，负责资源管理和任务调度。Resource Manager作为集群的核心，管理所有Node Manager并监控资源分配；Node Manager负责单节点资源管理，执行ResourceManager和Application Master的指令；Application Master是任务的管理者，申请资源并监控任务状态。Container是资源的封装单位，包含内存、CPU等，支持多任务在同一服务器上并发执行。
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
