hadoop中job,jobtracker相关

本文深入解析了Hadoop框架中的Job类与JobClient类的功能,包括它们如何继承和实现特定接口,以及如何在配置文件中设置调度器。文章详细阐述了JobClient类作为工具类在MapReduce操作中的应用,并强调了通过配置文件自定义调度算法的重要性。此外,文章还讨论了任务调度器的任务跟踪管理和实现细节。

 

  1. job类extends  jobcontext类
  2. jobclient类 extends  configured类;
  3. jobclient类 implements Tool,MRconstants接口
  4. jobtrack中设置调度器
  5. 读配置文件在configuration类中的get方法
  6. 若配置自己的调度算法,应该是直接在配置文件中设置“mapred.jobtracker.taskscheduler”属性
  7. jobtrack实现许多接口如:TaskTrackManager
  8. Taskscheduler 有方法:settasktrackermanager()
  9. Taskscheduler实现configurable
  10. 详细博文:http://wwangcg.iteye.com/blog/1838933

转载于:https://www.cnblogs.com/cxtblogs/p/5027652.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值