yoona666的博客

原创 Spark消息通信

二、Spark通信机制 2.1 Spark通信机制的重要概念 （1）RpcEndpoint：RPC端点，Spark将每个通信实体/集群节点（Client/Master/Worker等）都称之为一个Rpc端点，且都实现了RpcEndpoint接口，内部根据不同端点的需求，设计不同的消息和不同的业务处理，如果需要发送消息则调用Dispatcher中的相关方法； （2）RpcEnv：RPC上下文环境，RpcEndpoint运行时依赖的上下文环境称之为RpcEnv，其管理RpcEndpoint需要的一些东