七个步骤,带你快速读懂 RPC 框架原理

C++极简版的RPC框架   前言      RPC采用客户机/服务器模式实现两个进程之间的相互通信,socket是RPC经常采用的通信手段之一。当然,除了socket,RPC还有其他的通信方法:http、管道。。。网络开源的RPC框架也比较多,一个功能比较完善的RPC框架代码比较多,如何快速的从这些代码盲海中梳理清楚主要脉络,对于初学者来说比较困难,本文介绍之前自己实现的一个C++极简版的RPC框架,代码只有100多行,... 阅读详情

点击上方“芋道源码”,选择“置顶公众号”

技术文章第一时间送达!

源码精品专栏

 

来源:http://t.cn/R1zCimz

  • 1. RPC框架的概念

  • 2. RPC框架的原理解析

    • 2.1 流程纵览

    • 2.2 客户端调用

    • 2.3 动态代理

    • 2.4 网络传输

    • 2.5 服务端数据接受

    • 2.6 真实调用

    • 2.7 服务端的动态加载

  • 3. 总结


1. RPC框架的概念

RPC(Remote Procedure Call)–远程过程调用,通过网络通信调用不同的服务,共同支撑一个软件系统,微服务实现的基石技术。使用RPC可以解耦系统,方便维护,同时增加系统处理请求的能力。

这里写图片描述

上面是一个简单的软件系统结构,我们拆分出来用户系统和订单系统做为服务存在,让不同的站点去调用。

只需要引入各个服务的接口包,在代码中调用RPC服务就跟调用本地方法一样,我刚接触到这种调用方式的时候颇为惊奇,我明明调用的就是java语言方法啊(已java为例,现在RPC框架一般都支持多语言),怎么就调用了远程的服务了呢??

2. RPC框架的原理解析

最近自己写了一个简单的RPC框架KRPC,本文原理分析结合中代码,均为该框架源码

2.1 流程纵览

这里写图片描述

如上图所示,我将一个RPC调用流程概括为上图中5个流程,左边3个为客户端流程,右边两个为服务端流程。
下面就各流程进行解析

2.2 客户端调用

服务调用方在调用服务时,一般进行相关初始化,通过配置文件/配置中心 获取服务端地址
用户调用:

// 用户服务接口
public interface UserService {

    public User genericUser(Integer id,String name,Long phone);

}


//调用方
//服务初始化
KRPC.init("D:\\krpc\\service\\demo\\conf\\client.xml");
UserService service = ProxyFactory.create(UserService.class, "demo","demoService");
User user = service.genericUser(1, "yasin", 1888888888L);

一开始接触RPC调用方法肯定就有疑惑,它不是一个接口吗,直接调用应该没啥效果啊,我也没有引入实现包。

带着这个疑惑,我们就进入下一个知识点,动态代理

2.3 动态代理

动态代理这东西意如其名,它代理你帮你做事情。
上面我们不说道直接调用一个接口中的方法,并且没有用该接口的实现类调用,那么方法是怎么生效的呢?

可以看到这个用户服务这个service是由ProxyFactory代理工程创造的,在该ProxyFactory#create()方法中就跟一个代理处理器绑定在一起了

@Override
public Object invoke(Object proxy, Method method, Object[] args) throws Throwable {

    //构造请求request
    Request request = new Request();
    ....

    return RequestHandler.request(serviceName, request,returnClass);
}

这个类实现了InvocationHandler接口(JDK提供的动态代理技术),每次去调用接口方法,最终都交由该handler进行处理。
这个环节一般会获取方法的一些信息,例如方法名,方法参数类型,方法参数值,返回对象类型。

同时这个环节会提供序列化功能,一般的RPC网络传输使用TCP(哪怕使用HTTP)传输,这里也要将这些参数进行封装成我们定义的数据接口进行传输。

2.4 网络传输

我们通过将方法参数进行处理后,就要使用发起网络请求,使用tcp传输的就利用socket通信进行传输,这一块我开源项目中使用的同步堵塞的方案进行请求,也可以使用一些非堵塞方案进行请求,效率会更高一些。

2.5 服务端数据接受

这一块使用netty,可以快速一个高性能、高可靠的一个服务端。

public class ServerHandler extends ChannelInboundHandlerAdapter {

    @Override
    public void channelRead(ChannelHandlerContext ctx, Object msg) throws Exception {

        ByteBuf buf = (ByteBuf)msg;
        byte[] bytes = new byte[buf.readableBytes()];
        buf.readBytes(bytes);

        byte[] responseBytes = RequestHandler.handler(bytes);
        ByteBuf resbuf = ctx.alloc().buffer(responseBytes.length);
        resbuf.writeBytes(responseBytes);
        ctx.writeAndFlush(resbuf);

    }

    @Override
    public void exceptionCaught(ChannelHandlerContext ctx, Throwable cause) throws Exception {
        cause.printStackTrace();
        ctx.close();
    }

}

上面代码是我项目中使用的服务端代码。关于netty网上学习的资料很多,这里也只是宏观的讲解RPC原理,就不展开。

2.6 真实调用

服务端获取客户端请求的数据后, 调用请求中的方法,方法参数值,通过反射调用真实的方法,获取其返回值,将其序列化封装,通过netty进行数据返回,客户端在接受数据并解析,这就完成了一次rpc请求调用的全过程。

method = clazz.getMethod(request.getMethodName(),requestParamTypes);
method.setAccessible(true);
result = method.invoke(service, requestParmsValues)123

上面代码片段为通过反射调用真实方法

2.7 服务端的动态加载

通过2.2到2.6的说明,一次RPC请求过程大致如此,但是一个RPC框架会有很多细节需要处理。

其实在一次请求调用前,服务端肯定要先启动。

服务端作为一个容器,跟我们熟知的tomcat一样,它可以动态的加载任何项目。所以在服务端启动的时候,必须要进行一个动态加载的过程。在KRPC中,我使用了URLClassLoader动态加载一个指定路径的jar包,任何业务服务的实现所依赖的jar包都可以放入该路径中。

3. 总结

一个RPC框架大致需要动态代理、序列化、网络请求、网络请求接受(netty实现)、动态加载、反射这些知识点。现在开源及各公司自己造的RPC框架层出不穷,唯有掌握原理是一劳永逸的。掌握原理最好的方法莫不是阅读源码,自己动手写是最快的。



欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢:

已在知识星球更新源码解析如下:

源码不易↓↓↓↓↓

点赞支持老艿艿↓↓

RPC框架介绍以及手动实现RPC 前言: 首先提出一个问题:为什么需要使用RPC,而不是简单的http接口? 下面就说一下原因 http接口在接口不多、系统与系统交互较少的情况下,解决信息孤岛初期常使用的一种通信手段,优点就是简单、直接、开发方便。但是如果是一个大型的系统,内部子系统较多、接口非常多的情况下,RPC框架的好处就显现出来了。如下: 首先是长链接。不必每次通信都要像http一样去进行3次握手和4次挥手,减少了网络开销。 其次就是RPC框架一般都有注册中心,有丰富的监控管理。发布、下线接口、动态扩展等,对调用方来说是无感知 阅读详情

相关推荐

krpc:编码消息的简单 KRPC 协议实现

KRPC.js 编码消息的简单 KRPC 协议实现。 有关更多详细信息,请参阅。 安装 $ npm install krpc 应用程序接口 krpc.on('解析错误') krpc.on('查询') krpc.on('query_{type}') krpc.on('回应') krpc.on('{transId}') krpc.on('错误') KRPC(构造函数) krpc = new KRPC ( [ opts ] ) 创建一个新的krpc实例。 如果指定了opts ,则默认选项(如下所示)将被覆盖。 var KRPC = require ( 'krpc' ) ; var krpc = new KRPC ( { transIdBytes : 2 , // transaction id string length queryTimeout :

一文了解RPC框架原理

1.RPC框架的概念 RPC(Remote Procedure Call)–远程过程调用,通过网络通信调用不同的服务,共同支撑一个软件系统,微服务实现的基石技术。使用RPC可以解耦系统,方便维护,同时增加系统处理请求的能力。 上面是一个简单的软件系统结构,我们拆分出来用户系统和订单系统做为服务存在,让不同的站点去调用。 只需要引入各个服务的接口包,在代码中调用RPC服务就跟调用本地方法一样,我刚接触到这种调用方式的时候颇为惊奇,我明明调用的就是java语言方法啊(以java为例,现在RPC框架一般都支持多

程序员麦冬的博客(公众号同名) 777

krpc:Java中最好的rpc框架

krpc krpc取名参考百度的brpc和google的grpc, k无特殊含义 此框架使用java语言开发, 必须使用jdk 8才能使用此框架 轻量,简洁,高性能,强大的扩展性 用户手册 版本变更说明 和其它框架的基础特性比较 安装JDK 8 安装gradle或maven 框架目录结构 框架外部依赖说明 框架包依赖关系 PROTOC工具安装及使用 整体架构 krpc协议 接口定义 服务号和错误码约定 如何启动krpc 和spring框架集成(java config方式) 和spring框架集成(schema方式) 和spring框架集成(spring boot方式) 配置参数详解 RPC调用超时配置 客户端异步调用 服务端异步实现 服务端推送 负载均衡策略 动态路由策略 熔断和降级 MOCK 测试 重试策略 启动和关闭 参数验证 打点和跟踪 webroutes.xml配置 HT

Python实现KRPC与KSP通信

1 坎巴拉太空计划 简介 坎巴拉太空计划(KSP, Kerbal Space Program)是由Squad开发的一款使用Unity3D引擎,拥有极高自由度的沙盒风格航空航天模拟游戏。正式版于2015年4月27日开始发行。在这里玩家可以在一个“平行世界”里扮演坎巴拉航空航天工作者,设计、建造和发射自己的火箭、航天飞机以及亚轨道飞行器,将航天器送入轨道,并探索整个坎星系。 在坎巴拉太空计划中,完成坎巴拉外星人种族的太空计划。您可以使用一系列零件来组装功能齐全的航天器,...

DreamerZC的博客 3780

图数据挖掘 ECC K-core core number truss number clique

K-core:什么叫k-core,给定一个正整数k(k>=0),k-core是一个G的最大子图(也就是说k-core是一个图的限制),将这个子图定义为Hk,对于Hk中的每个顶点v,他的度数都是大于等于k的。 k-core是内嵌的,如下图所示,集合{ABCD}是H3,也就是3-core的子图。而集合{ABCDE}是H2,也就是2-core的子图,集合{ABCDEGF}是H1,也就是1-core的子图,而从集合的角度来讲H3<H2<H1。 core number:什么叫kcor

weixin_45193103的博客 1687

Cursor集成Claude 4.6免费版:本地IDE合规调用指南

大语言模型编程助手(LLM Copilot)已成为现代开发标配,其核心能力依赖于上下文理解、代码推理与结构化输出等关键技术原理。Anthropic官方提供的Claude系列模型,尤其Claude 4.6,凭借200K超长上下文、tool use函数调用和严格可控的API设计,在工程实践中展现出显著技术价值。该能力可无缝嵌入本地IDE环境,支撑代码解释、跨文件分析、单元测试生成等高频开发场景。本文聚焦Cursor这一开源可审计IDE,详解如何合规复用Anthropic免费tier接口(/v1/messages

weixin_34095889的博客 541

探索KRPC:一款高效、易用的远程过程调用框架

探索KRPC:一款高效、易用的远程过程调用框架 项目简介 是由 BruceRan 开发的一款开源的远程过程调用(Remote Procedure Call)框架,旨在提供一种简单、高效的跨语言服务调用解决方案。该项目以其轻量级设计和强大的功能,为开发者们提供了一种在分布式系统中实现低延迟通信的新选择。 技术解析 高性能与可扩展性 KRPC 基于 Google 的 gRPC 框架并对其进行优化,采用...

gitblog_00026的博客 698

跨厂商网络设备的RADIUS认证:Windows NPS的兼容性与最佳实践

本文详细探讨了Windows NPS在多厂商网络环境中的RADIUS认证实践,特别针对华为、华三、思科等主流设备的兼容性问题提供解决方案。从基础配置到高级优化,涵盖VSA属性映射、认证协议选择及安全加固措施,帮助企业实现统一身份认证并提升网络安全性。

weixin_29213827的博客 424

RPC框架实现原理

RPC非常重要,很多人面试的时候都挂在了这个地方!你要是还不懂RPC是什么?他的基本原理是什么?你一定要把下边的内容记起来!好好研究一下!特别是文中给出的一张关于RPC的基本流程图,重点中的重点,Dubbo RPC的基本执行流程就是他,RPC框架的基本原理也是他,别说我没告诉你!看了下边的内容你要掌握的内容如下,当然还有很多: RPC的由来,是怎样一步步演进出来的; RPC的基本架构是什么; RPC的基本实现原理,就是下边的这张图,重点中的重点; REST 和 SOAP、RPC 有何区别呢?

Ruishine的博客 2807

【华为OD机试真题】65、高矮个子排队 | 机试真题+思路参考+代码解析 (C++、Java、Py、C语言、JS)

题目描述 >现在有一队小朋友,他们高矮不同,我们以正整数数组表示这一队小朋友的身高,如数组{5,3,1,2,3}。 >  我们现在希望小朋友排队,以"高" "矮" "高" "矮" 顺序排列,每一个高位置的小朋友要比相邻的位置高或者相等;每个 "矮" 位置的小朋友要比相邻的位置矮或者相等; >  要求小朋友们移动的距离和最小,第一个从“高"位开始排,输出最小移动距离即可。 >  例如,在示范小队{5,3,1,2,3}中, {5, 1, 3, 2, 3}是排序结果。 > 

KJ.JK 2105

R语言机器学习算法实战系列(四)随机森林算法分类器+SHAP值 (Random Forest)

本文介绍了如何使用R语言实现随机森林算法,用于构建乳腺癌分类器。随机森林通过多棵决策树投票判断标签,具有避免偏差和提升模型效果的优势。文章详细讲解了数据下载、R包加载、数据预处理、特征选择、模型构建与评估等步骤。数据集包含569份恶性和良性肿瘤样本的32类指标,通过随机森林模型进行特征选择和分类。最终,文章提供了完整的代码和可视化结果,帮助读者理解并实现随机森林算法。

专注生信领域 3325

RPC框架的实现原理,及RPC架构组件详解

RPC的由来 随着互联网的发展,网站应用的规模不断扩大,常规的垂直应用架构已无法应对,分布式服务架构以及流动计算架构势在必行,亟需一个治理系统确保架构有条不紊的演进。 单一应用架构 当网站流量很小时,只需一个应用,将所有功能都部署在一起,以减少部署节点和成本。 此时,用于简化增删改查工作量的 数据访问框架(ORM) 是关键。 垂直应用架构 当访问量逐渐增大,单一应用增加机器带...

sinat_28995003的博客 1468

OTFS 消息传递算法信号检测【附matlab代码详解】

OTFS 消息传递算法方面的一些浅浅理解。

Cuby的博客 4014

写一个RPC框架需要哪些步骤?

RPC(Remote Procedure Call)远程过程调用,是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC框架是一种远程调用的框架,它可以让你像调用本地方法一样调用远程方法。避免了开发人员自己去封装网络请求、连接管理、序列化、反序列化等操作,提高了开发效率。

王二的博客 1143

WinCC 7.5 读取 SQL server2016 中的表格数据

环境 win10 SQL Server 2016 WinCC V7.5 SP2 1 安装SQL Server 2016 2 选择服务器名称 .\WINCC 3 建数据库

skr? 7143

【OpenFOAM】-olaFlow-算例4- irreg45degTank

不规则波浪模拟

ou_no的博客 2117

【手写RPC框架】手写一个RPC框架 Netty + 虚拟线程 附源代码

如何使用Java的虚拟线程和Netty手写一个基于自定义协议的RPC(远程过程调用)框架。文章首先解释了RPC框架的概念和Netty的优势,接着介绍了Java虚拟线程的特点和适用场景。然后,文章详细描述了实现RPC框架的各个步骤,包括服务发现和注册、请求和响应的处理、连接的管理等。同时,文章展示了如何将虚拟线程与Netty结合,通过修改Netty的线程模型来提高性能。最后,作者提供了项目的源码链接,并鼓励读者关注和反馈。

不想当吗喽的博客 4208

数学建模模型总结

这是本人在两年内准备参加数学建模竞赛搜集到的模型资料,已经经过了本人的筛选和整理,希望能够对准备参加数学建模竞赛的学弟学妹们提供一些帮助!

RPC框架实现原理,看这篇就够了!

点击上方 "程序员小乐"关注,星标或置顶一起成长每天凌晨00点00分,第一时间与你相约每日英文Don’t let anyone steal your dreams. Follow your heart, no matter what.不论做什么事,相信你自己,别让别人的一句话将你击倒。每日掏心话当回首人生的那些酸苦,你会回味出一种坚强;当你学会放手的时候,你会发现你已经拥有。来自:hu1991...

吧主 2280

RU DOS版、EFI版32bit/64bit BIOS常用工具

DOS版、EFI版的RU工具,可用来查看IO、MEM、PCI、SMBIOS等资源。亲测在EFI SHELL下可用。

TMS_WebGMaps_1.9.8.0_Full_Source

TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder

架构方案(21) RPC框架的实现原理,及RPC架构组件详解

谈微服务就不得不谈到RPC 随着互联网的发展,网站应用的规模不断扩大,常规的垂直应用架构已无法应对,分布式服务架构以及流动计算架构势在必行,亟需一个治理系统确保架构有条不紊的演进。 单一应用架构 当网站流量很小时,只需一个应用,将所有功能都部署在一起,以减少部署节点和成本。 此时,用于简化增删改查工作量的 数据访问框架(ORM) 是关键。 垂直应用架构 当访问量逐渐增大,单...

cowbin2012的专栏 1万+

Camera2Demo

在Camera2 的基础上进行封装,使得Camera2一堆初始化逻辑与Activity分离,降低耦合度,完成预览拍照并保存的操作

spark通信框架rpc原理篇

(Remote Procedure Call)是的缩写,是一种通信协议,。RPC在分布式系统中非常常用,因为它可以让程序员像调用本地函数一样来调用远程服务。在Apache Spark中,RPC是用于在节点之间进行通信的机制Spark使用Netty作为RPC框架,它可以让节点之间的通信更快、更可靠。在Spark中,RPC主要用于在Executor和Driver之间传输数据和调用方法。例如,当Executor需要将数据传输到Driver时,它会使用RPC机制将数据发送到Driver。

2301_77948840的博客 2078

RPC框架原理分析

目录 一、为什么要有RPC 二、什么是RPC 三、PRC架构组件 四、RPC和SOA、SOAP、REST的区别 五、RPC框架需要解决的问题? 六、RPC的实现基础? 七、RPC使用了哪些关键技术? 八、主流RPC框架有哪些 九、RPC的实现原理架构图 RPC非常重要,很多人面试的时候都挂在了这个地方!你要是还不懂RPC是什么?他的基本原理是什么?你一定要把下边的内容记起来...

凡是过往,皆为序章 1217

一篇文章了解RPC框架原理

Java面经2019-03-03 06:30:00 作者:Yasin 原文:https://blog.youkuaiyun.com/u013592964/article/details/80441205 1.RPC框架的概念 RPC(Remote Procedure Call)--远程过程调用,通过网络通信调用不同的服务,共同支撑一个软件系统,微服务实现的基石技术。使用RPC可以解耦系统,方...

u011277123的博客 434
上一篇: 五款主流 Linux 发行版性能对比,稳而不强?
下一篇: 树莓派上利用 Tensorflow 实现小车的自动驾驶
公众号-芋道源码
博客等级 码龄10年 1640粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值