Hadoop RPC机制

Hadoop作为分布式存储系统，各个节点之间的通信和交互必不可少，所以需要实现一套节点间的通信交互机制。RPC(Remote Procedure CallProtocol，远程过程调用协议)允许本地程序像调用本地方法一样调用远程机器上应用程序提供的服务，所以Hadoop实现了一套自己的RPC框架。Hadoop RPC框架没有使用JDK自带的RMI，而是基于IPC(Inter Process Communications，进程间通信)模型实现了一套高效的轻量级RPC框架，这套RPC框架底层主要采用Java NIO、动态代理以及protobuf等基础技术。
​

RPC是一种通过网络调用远程计算机服务的协议。RPC协议假定存在某些网络传输协议，如TCP或UDP，RPC会使用这些协议传递RPC请求以及响应信息，RPC协议使得分布式程序的开发更加容易。
​

RPC采用客户端/服务器模式。请求程序就是一个客户端，而服务提供程序就是一个服务器。客户端首先会发送一个有参数的调用请求到服务器，然后等待服务器发回响应信息。在服务器端，服务提供程序会保持睡眠状态直到有调用请求到达为止。当一个调用请求到达后，服务提供程序会执行调用请求，计算结果，向客户端发送响应信息，然后等待下一个调用请求。最后，客户端成功地接收服务器发回的响应信息，一个远程调用结束。

如上图所示，给出了RPC框架的架构：

• 通信模块：传输RPC协议请求和响应的网络通信模块，可以基于TCP协议，也可以基于UDP协议，可以是同步的，也可以是异步的。
• 客户端Stub程序：服务器和客户端都包括Stub程序。在客户端，Stub程序表现得就像本地程序一样，但是底层却会将调用请求和参数序列化并通过通信模块发送给服务器。之后Stub会等待服务器的响应信息，将响应信息反序列化并返回给请求程序。可以理解为就是一个代理对象，会通过动态代理生成一个客户端Proxy类。
• 服务端