Yarn的工作流程
关注
分享
扫一扫
牛犊6
苦心人，天不负
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Yarn详细的工作流程
yarn详细工作流程第一步：客户端向ResourceManager 申请运行程序第二步：ResourceManager 检查是否有运行权限，如果有就会返回jobid和程序提交的资源路径第三步：根据ResourceManager返回的信息，然后执行第四步：客户端提交程序的资源到tmp/hadoop-yarn-staging/job_id目录下（jar程序本身，job.split逻辑切规划文...原创 2020-03-15 20:25:35 · 2172 阅读 · 0 评论 -
yarn简单介绍
1.HDFS管理者：namenode工作者：datanode2.MapReduce管理者：JobTracker3.工作者：TaskTrackerYarn管理者：ResourceManager工作者：nodeManager问题一： 集群提交任务时，是什么决定任务分配到哪个节点上？yarn问题二： 集群提交任务，偶尔成功，偶尔失败（使用尾部配置文件）程序所需要的配置文件缺失（...原创 2020-03-14 23:51:56 · 397 阅读 · 0 评论