plproxy的调用流程

plProxy部署 PL-Proxy tutorial pl/proxy的安装,部署,以及例子,英文版本 针对postgresql集群 立即下载
    plproxy能够在PostgreSQL上运行的一种过程语言,能够完成对远程数据库的调用,并能够完成数据切片的功能。数据流处理过程如下图所示:

    首先需要明确的是plproxy只能对用户自定的方法才有小,如果想达到对sql语句的无条件转发,plproxy是做不到的。比如希望所有的select * from tablename 都转发到cluster1上,所有的update语句都转发到cluster2上,是不能通过plproxy做到的。
    plproxy能做到的是:在plproxy cluster上定义foo()函数,在cluster1和cluster2上也定义foo()函数,cluster1和cluster2上的foo()函数的定义是完全相同的,包括函数参数都是相同的;二者和plproxy cluster上的foo()定义均不同。

    1. plproxy的关键函数

        a. plproxy.get_cluster_version(cluster_name)  举例如下:
  1. CREATE OR REPLACE FUNCTION plproxy.get_cluster_version(cluster_name text)
  2. RETURNS int4 AS $$
  3. BEGIN
  4.     IF cluster_name = 'a_cluster' THEN
  5.         RETURN 1;
  6.     END IF;
  7.     RAISE EXCEPTION 'Unknown cluster';
  8. END;
  9. $$ LANGUAGE plpgsql;
          该函数返回的是当前plproxy的配置版本号,每当有请求时此函数都会调用。如果该函数的返回值和plproxy的缓存的配置版本号不同,则plproxy会认为配置已经更新,就会调用下面两个函数重新读取配置。

       b. plproxy.get_cluster_partitions(cluster_name text) 举例如下:
  1. CREATE OR REPLACE FUNCTION plproxy.get_cluster_partitions(cluster_name text)
  2. RETURNS SETOF text AS $$
  3. BEGIN
  4.     IF cluster_name = 'a_cluster' THEN
  5.         RETURN NEXT 'dbname=part00 host=127.0.0.1';
  6.         RETURN NEXT 'dbname=part01 host=127.0.0.1';
  7.         RETURN;
  8.     END IF;
  9.     RAISE EXCEPTION 'Unknown cluster';
  10. END;
  11. $$ LANGUAGE plpgsql;
        该函数返回plproxy所设置的内容,当所访问的cluster名称为a_cluster时,返回RETURN NEXT所对应的远程主机配置。

       c. plproxy.get_cluster_config(cluster) 举例如下:
  1. CREATE OR REPLACE FUNCTION plproxy.get_cluster_config(
  2.     in cluster_name text,
  3.     out key text,
  4.     out val text)
  5. RETURNS SETOF record AS $$
  6. BEGIN
  7.     -- lets use same config for all clusters
  8.     key := 'connection_lifetime';
  9.     val := 30*60; -- 30m
  10.     RETURN NEXT;
  11.     RETURN;
  12. END;
  13. $$ LANGUAGE plpgsql;
        该函数返回plproxy与cluser1和cluster2链接时的一些参数,如生命周期,超时时间,是否使用binary IO等。

    2. foo()函数的定义:

        在plproxy cluster上定义foo的内容如下:
  1. CREATE OR REPLACE FUNCTION foo(i_username text)
  2.   RETURNS text AS
  3. $BODY$
  4.     CLUSTER 'a_cluster'; RUN ON hashtext(i_username) & 1;
  5. $BODY$
  6.   LANGUAGE 'plproxy' VOLATILE
  7.   COST 100;
       在cluster1和cluster2上定义foo的内容如下:
  1. CREATE OR REPLACE FUNCTION foo(i_username text)
  2.   RETURNS text AS
  3. $BODY$
  4. BEGIN
  5.     RETURN 'user already exists';
  6. END;
  7. $BODY$
  8.   LANGUAGE 'plpgsql' VOLATILE SECURITY DEFINER
  9.   COST 100;
       可以看到,在plproxy上定义的foo()函数的language是“plproxy”,在cluster1和2上的foo()函数定义的language是“plpgsql”,这是最主要的区别。

   3. 调用过程


      a. 客户端发送select foo()的请求到plproxy cluster;
      b. plproxy cluster发现foo()是用户自定义的函数,查找到该函数定义内容发现该函数是通过plproxy language定义的
      c. plproxy cluster把控制权转交到plproxy language的handler,
      d. 该handler执行foo()的内容,发现该函数需要使用名为"a_cluster"的配置
      e. handler调用 plproxy.get_cluster_version("a_cluster"),发现配置版本号相符;
         则继续调用 plproxy.get_cluster_partitions("a_cluster")获得四项远程cluster的链接配置;
         然后继续调用 plproxy.get_cluster_config( in  cluster_name text, out  key text, out  val text)获得链接时的配
         置信息
      f. 最后根据 RUN ON hashtext(i_username) & 1 把"select foo()"请求转发到cluster1或者2上。 
         hashtext(i_username) & 2 会返回一个0-1之间的值,根据这个值确定应该转发请求到哪个具体的cluster上.
      g. 在cluster上执行"select foo()",把结果" user already exists"返回给plproxy cluster
      h. plproxy cluster再把收到的结果返回给client.

   4. plproxy的局限
       plproxy并不能完成无条件的转发,只能在自定义的函数上实现此功能。这就要求在实际的应用中,需要把大量的业务逻辑放到PostgreSQL服务器端来完成,降低了灵活度。

       一点体会:使用PostgreSQL,需要改变思路,需要适应把业务逻辑通过服务器端编程实现的过程。这是与MySQL的很大不同。

      plproxy官方链接

      例子: PostgreSQL cluster: partitioning with plproxy (part I)
            PostgreSQL cluster: partitioning with plproxy (part II)



别再死记硬背了!用TwinCAT 3手把手教你配置EtherCAT伺服驱动的PDO映射(DS402协议) 本文详细介绍了如何使用TwinCAT 3配置EtherCAT伺服驱动的PDO映射(DS402协议),涵盖环境准备、设备扫描、PDO映射实战及高级技巧。通过具体操作步骤和常见问题排查,帮助工程师快速掌握EtherCAT通信配置,提升运动控制系统的效率和稳定性。 阅读详情

相关推荐

TCN(Temporal Convolutional Networks)时序卷积网络详解及代码

TCN(Temporal Convolutional Networks)时序卷积网络详解及代码

zhulewen的博客 7885

17 PLproxy的使用

文章目录17.1 PL/Proxy中的概念17.1.1PL/ Proxy的定义 17.1 PL/Proxy中的概念 17.1.1PL/ Proxy的定义 能在Pg中实现数据水平拆分的软件。 数据库水平拆分的架构如图17-1   客户端把SQL请求发送到“水平拆分中间件", 根据SQL中数据水平拆分键的hash值, 把SQL分发到底层的数据库节点处理 PL/Proxy架构中会把一些Po...

fgh123的博客 1049

全新RGB-D及平面法线数据集DIODE

丰田工业大学联合芝加哥大学和北航发布全新RGB-D及平面法线数据集 DIODE (Dense Indoor and Outdoor DEpth)。

qq_43477338的博客 1540

PostgreSQL分布式架构之——PL/Proxy

1. PL/Proxy的介绍 1.1 PL/Proxy概述   PL/Proxy是一款能在PostgreSQL数据库实现数据库水平拆分的软件;可以理解分布式架构(shared nothing);但是不是真正的分布式数据库软件;也是一款能在PostgreSQL数据库实现SQL语言复制(replication)  分布式架构图如下: 1.2 PL/Proxy集群配置   PL/Proxy既...

weixin_34357962的博客 416

Halcon工业相机开发全流程:从SDK配置到实时图像采集(C++版)

本文详细介绍了使用C++进行Halcon工业相机开发的完整流程,从SDK配置到实时图像采集的实现。涵盖环境搭建、设备初始化、回调机制、参数控制等关键环节,并提供异常处理和实战案例,帮助开发者快速掌握工业视觉系统的开发技巧。

weixin_33728268的博客 515

用python将dycom .dcm格式图像转换为nifti .nii

因为发现目前搜索到的多数中文教程并不能正确将FMRI图像正确转换,例如很多用simpleITk的seriesreader的,所以写了一下自己正确转换的方法。因为FMRI是一个4D数据,有时间轴,所以用seriesreader读写出来的图像把时间轴维度给降维了。当然你用SPM12工具的dycom import也是能正确转换的,但是我还是喜欢python这样的,代码直接简单。

qq_41103479的博客 3611

推荐项目:PL/Proxy —— PostgreSQL的分布式数据库处理利器

推荐项目:PL/Proxy —— PostgreSQL的分布式数据库处理利器 项目介绍 PL/Proxy 是一个用于 PostgreSQL 的过程语言(PL)处理器,它允许在多个 PostgreSQL 数据库之间进行远程过程调用,同时还支持可选的数据分片功能。这个强大的工具使得大规模数据管理变得更加灵活和高效。 项目技术分析 PL/Proxy 提供了四种主要语句来实现其核心功能: 选择远程数据...

gitblog_00042的博客 567

【异常】‘build.plugins.plugin.version‘ for org.apache.maven.plugins:maven-resources-plugin is missing

maven-compiler-plugin 插件版本信息没有指定导致了错误提示如下字面意思就是没有指定版本信息。

奶爸的编程之路,也就一周冷个三天 4602

PostgreSQL 水平分库——plproxy

1、PL/Proxy安装 1、1 编译安装 tar -zxvf plproxy-2.7.tar.gz cd plproxy-2.7 source /home/postgres/.bashrc make make install 1、2 创建pl/proxy扩展 itm_pg@pgs-> psql psql (10.3) Type "help" for help. postgres=# cr...

Focus on PostgreSQL 2446

智能手环嵌入式系统:STM32+ESP8266多传感器健康监护设计

可穿戴健康监测设备是物联网与边缘计算融合的典型应用,其核心在于多源生理信号采集、低功耗实时处理及安全云协同。基于光电容积脉搏波(PPG)的心率与血氧检测、NTC热敏电阻体温测量、加速度-角速度融合跌倒判据等技术,构成了老年健康监护的基础感知能力;而STM32主控与ESP8266协处理器分工架构,则实现了计算资源与通信负载的高效解耦。该方案依托FreeRTOS多任务调度、阿里云IoT物模型标准化交互及MQTT双向通信,兼顾实时性、可靠性和工程可维护性,广泛适用于居家养老、慢病管理与远程健康预警等场景。

weixin_33256096的博客 102

【01】Python解释器的安装

工欲善其事必先利其器。君欲学PYthon,则必先安装Python解释器。安装过程相对简单,大致跟着如下步骤走即可。

侯小啾技术博客 1262

PL/Proxy 开源项目最佳实践教程

PL/Proxy 开源项目最佳实践教程 1. 项目介绍 PL/Proxy 是一个 PostgreSQL 存储过程语言(PL)处理器,它允许在 PostgreSQL 数据库之间进行远程过程调用,同时提供可选的分片功能。PL/Proxy 提供了灵活的数据库查询调度机制,可以有效地在多个数据库之间分配和执行查询任务。 2. 项目快速启动 环境准备 确保你的系统中已安装 PostgreSQL 开发环境,并...

gitblog_00987的博客 377

IGBT栅极电阻怎么选?

IGBT驱动电路中栅极电阻的选择至关重要,直接影响开关速度、损耗、EMI和寄生导通等问题。本文详细介绍了两种栅极电阻计算方法:根据目标开通时间和目标dv/dt计算,并分析

硬核科技 28

postgreSQL使用plproxy搭建集群注意的方面

1在安装plprox后使用make installcheck来检查是否安装正确,提示错误,需要创建root用户,并且要创建数据及登陆的权限。并且登陆认证的时候,pg_hba.conf文件中的 方法要使用trust,不能使md5,

敖尔其楞的专栏 1906

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

Postgresql分布式插件plproxy

作者:高铭杰 邮箱:jackgo73@outlook.com 日期:2017年7月4日Simple remote function call节点61/62(datanode)CREATE TABLE users (username text, email text); insert into users values ('user0', 'user0@gmail.com'); insert

JackGo! 2255

IMSL CNL 7.0.0 (x86-64)Crack

IMSL CNL 7.0.0 (x86-64)Crack intel的算法库破解文件,这是C++版本的破解文件

plproxy 安装日记

       这两天一直在研究postgresql的集群,pg的集群方案中有一个非常优秀的解决方案,那就是skype公司的plproxy,在官方网站上看到据称使用plproxy可以轻松解决大数据量大并发访问的问题,号称可以轻松维护10亿用户信息的维护。      今天,我也在我本地环境中配置一下. 首先我介绍一下配置本地环境必须要用到的安装包postgresql-8.3.1.tar.gz plpr

莫正华 1029

温度PID控制PLC程序

温度PID稳定控制程序,适用于欧姆龙PLC,对其他PLC也具有很大参考价值

plproxy 之二 create extension plproxy

os: centos 7.4.1708 db: postgresql 11.8 plproxy: 2.9 PL/Proxy is database partitioning system implemented as PL language. 就是可以用来水平分库 192.168.56.111 p1 192.168.56.112 p2 192.168.56.113 n1 192.168.56.114 n2 这4个节点都需要安装 postgresql 11 及 plproxy 版本 # cat /

一名数据库爱好者的专栏 790

PG PLProxy配置说明

1.下载plproxy-2.6.tar.gz网址:https://plproxy.github.io/root用户上传到 /home/soft目录# cd /home/# chown postgres.postgres soft# cd soft# chown postgres.postgres plproxy-2.6.tar.gz2.编译安装前提:postgresql 9....

weixin_33738578的博客 194

配置一个使用plproxy的PostgreSQL数据库集群

假设现在假设我们有这样一个环境: Node_proxy,上面是plproxy 的运行环境;IP: 192.168.1.253, postgresql 数据库端口 5432,数据库是testproxy Node_db1,是第一个数据库节点;IP:192.168.1.1, postgresql数据库端口 5432,上面数据库名是 test1 Node_db1,是第二个数据库节点;IP:192.

在水一方 1485

PostgreSQL cluster: partitioning with plproxy (part I)

Skype has developed many handy tools for creating a database cluster and this series of posts is intended to shed some light on their rather undocumented features. At the base of it stand’s plproxy. T

在水一方 2254

plproxy 之三 测试1

os: centos 7.4.1708 db: postgresql 11.8 plproxy: 2.9 PL/Proxy is database partitioning system implemented as PL language. 就是可以用来水平分库 192.168.56.111 p1 192.168.56.112 p2 192.168.56.113 n1 192.168.56.114 n2 这4个节点都需要安装 postgresql 11 及 plproxy 版本 # cat /

一名数据库爱好者的专栏 551

PostgreSQL 最佳实践 - 水平分库(基于plproxy)

背景 我一直以来都比较推荐plproxy这个PostgreSQL代理软件, 因为它小巧灵活好用, 效率高. 最近朋友邀请我给他们做个分布式的方案, 所以又把plproxy翻出来了. 本文讲一讲在单节点中如何快速的部署plproxy环境. 环境 PostgreSQL 9.3.1 plproxy 2.x plrpoxy节点 hostaddr ...

weixin_33754913的博客 733
上一篇: 在一台机器上运行多个PostgreSQL实例
下一篇: update中的alias
barfoo
博客等级 码龄20年 11粉丝 45原创
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值