Akka（二）：使用Akka模拟yarn

最新推荐文章于 2023-09-27 09:28:05 发布

原创

最新推荐文章于 2023-09-27 09:28:05 发布 · 464 阅读

0 ·

CC 4.0 BY-SA版权

本文介绍了如何使用Akka库在Scala中模拟YARN集群的通信，展示了MyResourceManager和MyNodeManager类的实现，涉及Actor系统、远程通信、任务注册与心跳检测。

1.样例
使用akka来模拟yarn集群的通信。流程图如下：

完整代码如下：

MyResourceManager.scala

import akka.actor.{Actor, ActorSystem, Props}
import com.typesafe.config.ConfigFactory
 
import scala.collection.mutable
import scala.concurrent.duration._
 
class MyResourceManager extends Actor{
  //将Worker信息存到map集合中
  val map = new mutable.HashMap[String, WorkerInfo]()
 
 
  override def preStart(): Unit = {
    println("preStart")
    import context.dispatcher
    context.system.scheduler.schedule(0.millisecond,5000.millisecond,self,CheckTimeOutWorker)
  }
 
  //消息的接受  此函数为偏函数 不需要写match
  override def receive: Receive = {
    //做模式匹配
    case "hello" =>{
      println("hello")
    }
&nb