python与RPC

最新推荐文章于 2025-06-28 12:28:33 发布

最新推荐文章于 2025-06-28 12:28:33 发布 · 217 阅读

文章标签：

#Python #网络协议 #Google #网络应用 #XML

python 专栏收录该内容

0 篇文章

订阅专栏

介绍一下python 的rpc 解决方案。

在google的doc上有共享的ppt文档地址http://docs.google.com/present/view?id=dfz4688f_0gvdx5cc8&revision=_latest&start=0&theme=blank&cwj=true

全文摘抄如下：

主要内容

0 动态语言特性， python 简介。

1 以 python 自带的一个 RPC 库， SimpleXMLRPCServer 来说明什么是 RPC, 以及 RPC 工作过程。

2 通过 RPC 的工作过程讨论它的本质。以及动态语言在运用 RPC 上的优势。

3 RPC 的传输协议， UDP,TCP,HTTP,XXXP.

4 RPC 的数据协议 , xml ， json ，各种私有二进制协议（ hessian amf3 … . ）。大公司的 google 的 protocolbuffer ， facebook 的 thrift 。

5 个人推荐一个精巧好用开源的 RPC ----phprpc

0.1 动态语言特性， python 举例说明

1 弱类型

a = 10 a = ‘ string ’ a = [] 变量可以改变类型不用声明。往往可以看成是同一父类，如 python 的所有类型在 c 语言级别上都是 Pyobject 这个类型

2 解释执行

python 一行一行的解释执行，其动态语言也很相似（ js 一段一段解释执行）。 Python lua ， ruby 等会生成字节代码， python 的 dis 模块可以显示字节代码。

3 虚拟机

解释性的语言往往面对的不是 cpu 具体硬件机器，所以一般都有虚拟机（解释器）。 Javascript ？对动态语言的深入了解就是了解他的虚机。

4 自省能力强

弱类型的特点也就等价于它具有强大的自省能力，强大的自省能力允许了动态改变类型数据的基础。这个为 RPC 的应用带来了很多的便利。主要是介绍这点。

0.2python 的自省与动态

0 查看自己的类型 type （）

1 查看自己的属性 dir （）， __dict__ 查看帮助 help （）。

2 设置获得自己的属性 getattr （重载 __getattr__ ） setattr hasattr 。

3 弱类型的多态更加广泛。例如 print 可以对任何对象调用。这里用到

可以像函数一样被调用的类。一个类也可以被 call 只要重载 __call__

1.1 自在 电池的 python

一个最简单的 RPC 服务器端

from SimpleXMLRPCServer import SimpleXMLRPCServer

def add(a , b):

return a+b

server = SimpleXMLRPCServer(("localhost", 8000))

server.register_function(add)

server.serve_forever()

测试客户端

from xmlrpclib import ServerProxy

server = ServerProxy("http://localhost:8000")

try:

ret = server.add(30,90)

print 'result:', ret

print 'result type:', type(ret)

except Exception as ex:

print "exception", ex

1.2 服 务器客户端都干了什么？

1 从客户端打印出通讯的数据：

发向服务器的：

POST /RPC2 HTTP/1.0

Host: localhost:8000

User-Agent: xmlrpclib.py/1.0.1 (by www.pythonware.com )

Content-Type: text/xml

Content-Length: 189

<?xml version='1.0'?>

</params>

</methodCall>

2 服务器返回的数据：

HTTP/1.0 200 OK'

Server: BaseHTTP/0.3 Python/2.6.1

Date: Mon, 20 Jul 2009 05:33:09 GMT

Content-type: text/xml

Content-length: 123

<?xml version='1.0'?>

</methodResponse>

特点： http 协议传输协议， xml 做数据协议应用协议。

因为 http 只作为传输协议所以只使用了 post 方法。

3 Xml 作为数据协议是如何生成的？

客户端在调用 server.add(30,90) 如何生成 xml 接口调用描述？

重载方法： def __getattr__(self, name) ，点操作符会调用它。返回对象的一个属性。因为 python 的函数也是对象所以 __getattr__ 返回的是一个函数对象。函数对象可以重载它的 __call__ 方法来达到函数调用时的行为。如图：

server.add(30,90) ➔ server.__getattr( ‘ name ’ ) ➔ methodobj(30,90) ➔ method.__call__(30,90) ➔ 生成 xml ， send request ➔ 收到 xml 数据 ➔ 生成 python 对象 return 。

这个过程动态语言和静态语言的区别在于，动态语言是自省能力生成的接口描述调用，而静态语言 rpc 往往需要手工来编写这个调用描述。所以动态语言可以像写本地函数调用一样调用远程函数。给程序员最好的用户感受。

RPC 本质上是一个链接程序 ld 。

1 找到函数地址

2 确保参数正确（因为动态语言弱类型所以这点表现不明显，只是确保参数个数正确，类型正确属于语义上的由程序员保证。）

回忆 c 语言的编译链接。当调用一个外部库函数的时候，只写符号在文件里，链接程序确保找到这个函数加载进来，确定程序运行时这个函数代码段的内存地址。

而且链接程序在链接之前会检查函数声明，来确保函数的参数类型和个数正确（ c90 之前还是只有 K&R c 链接时是不检查参数的）。

泛开来想，计算机内所谓远近，都是相对的，硬盘相对于内存来说是远的，网络相对于内存也是远的。调用一个文件函数，底层也是调用文件系统这个服务然后把硬盘数据读入硬盘。调用远程函数也是如此。只是“寻址”的过程有所不同。其实都是链接技术。

3.1RPC 传输协议与应用协议

1 传输协议：

RPC 的特点之一是向程序员隐藏网络层。使得调用远程方法像调用本地方法一样。所以传输协议也就可以有 N 多的选择。常见 HTTP ， TCP ， udp 。甚至可以用邮件协议。总之这点对程序员要保持透明。

也就是说程序员即使不会网络编程没有玩过 socket 都不妨碍他进行服务器的远程调用。

2 应用协议：

有很多数据格式可以采用， xml ， json ， amf3 ， yaml …… 为了速度和空间考虑很多 rpc 采用了二进制协议。不管怎样这一层对程序员也应当是透明的。

所有这些使得程序员彻底脱离了重复的“网络建设”。而且保证了代码的分离。

4.1Protocolbuffer

这是 google 公司使用的标准数据格式。 Google 的产品都是用的它

Protocol buffers are now Google's lingua franca for data – at time of writing, there are 48,162 different message types defined in the Google code tree across 12,183.proto files. They're used both in RPC systems and for persistent storage of data in a variety of storage systems.

http://code.google.com/intl/zh-CN/apis/protocolbuffers/docs/overview.html

因为 google 公司只使用 python java c++ 所以这个东东也只支持这三种语言。

特点：