JobManager--启动

本文详细介绍了JobManager的启动过程,从main方法开始,包括日志环境和配置加载,接着深入runJobManager方法,重点解析startJobManagerActors和startJobManagerActors中的createJobManagerComponents方法,涉及组件如存储、备份策略、调度器、提交作业管理等。此外,还提到了在本地模式下如何启动TaskManager及其Reaper。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

JobManager启动

  • JobManager里有个main方法,通过脚本启动,主要做的工作如下:

  • 首先做一些检查,加载日志环境和配置

  • 启动jobManager

    try {
      SecurityUtils.getInstalledContext.runSecured(new Callable[Unit] {
        override def call(): Unit = {
          runJobManager(
            configuration,
            executionMode,
            externalHostName,
            portRange)
        }
      })
    } catch {
      。。。
    }
    
  • 深入runJobManager方法,下面着重看下这个方法:

def runJobManager(
  configuration: Configuration,
  executionMode: JobManagerMode,
  listeningAddress: String,
  listeningPort: Int)
: Unit = {

。。。

// 首先启动JobManager ActorSystem,因为如果端口0之前被选中了,startActorSystem方法决定了使用哪个端口号,并进行相应的更新。
val jobManagerSystem = startActorSystem(
  configuration,
  listeningAddress,
  listeningPort)

//创建HA服务
val highAvailabilityServices = HighAvailabilityServicesUtils.createHighAvailabilityServices(
  configuration,
  ioExecutor,
  AddressResolutio
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值