数据服务笔记

python樱桃小丸子_基于python3.6的CIMISS系统数据统一服务接口客户端开发 # Created on 2017/08/25## @author: zhangxinimport datetimefrom cma.cimiss.DataQueryClient import DataQueryif __name__ == '__main__':# 定义client对象,指定数据服务ip和port# client = DataQuery(serverIp="10.96.89.55... 阅读详情

1.Overview

      数据服务是专门化的Web服务,在Web服务占了很大的地盘。
      因此,有企业服务总线(ESB),也会有数据总线,两者是SOA下的两大总线,概念与功能上基本能一一对应,都是提供集中、星型的访问服务。
      数据vs信息。数据一般指单体的表,而信息指有业务含义的多个数据表的组合。数据服务的主体一般是"信息"。

2.数据的基本服务接口

     通过元数据定义,将一个或多个数据表组合为信息视图,暴露为服务,提供CRUD接口和更新通知机制。

     除了让数据总线直接访问数据库外,数据源还可能是业务系统的WebService/EJB等接口,这一点上极具SOA的意义,业务系统下的数据库极有可能在物理上或逻辑上不允许总线对其直接访问和更新。
    
     1.CRUDSI操作接口:

     对信息暴露标准的Create,Update,Delete,Retrive,Search与Information接口。
     除了最传统的WebService接口外,还可能有下面的传输协议与数据格式:

  • REST,轻量级面向资源接口,数据服务似乎是REST最贴切的用武之地--层次式URL定位对象,CRUD操作的HTTP原语。
  • JSON/POX(Plain Old XML),尽量简化的数据传输。
  • RSS/ATOM Feed,轻量级的信息发布订阅格式。
  • IBM/BEA的SDO规范,虽然看上去很美,但由于数据传输的跨平台要求,没有MS的加入等于白搭。
  • 虚拟JDBC Driver,支持ADO.net的WebService,尽量减少旧系统改造的成本。

     2.查询语言:

  • 直接的SQL92语言。
  • 针对XML结果集的XQuery。
  • 自设计的面向对象的查询语言,JPA的JQL、Salesforce的SOQL、Facebook的FQL等,能更好的表达信息视图中的对象嵌套关系,如post.comments。
  • Google Base的简单按属性匹配查询--Fillter模式。

     3.数据更新通知机制:

  • SalesForce的带时间窗参数(beginTime,endTime)的服务端查询接口,如id[] getUpdated(objectType,beginTime,endTime)。
    优点-最为简单;缺点-实时性低,要达到高实时性时资源损耗严重;
  • 客户自行实现接收通知的Web Service,供服务端调用。
    缺点--客户需要实现Web Service Server,而服务端需要自行实现订阅,可靠性保障等消息中间件功能。
  • 使用跨平台的消息中间件 ,客户通过MOM的客户端接收消息。而且封装屏蔽底层消息中间件的存在,只向用户提供有限的API。
    优点-效率高,且对客户端要求低。缺点-免费又服众的跨平台中间件难觅。

     4.接口粒度:

       可以每个业务实体一个接口,下属SCURDI操作,也可以使用同一个操作接口,使用REST定位对象类型。 

        REST的"层次式定位"比单纯的"数据类型"更适合复杂的数据环境。无论是最后是采用SOAP还是REST格式,采用RPC风格与强数据类型都会频繁增加或改动接口。

     5.权限规则引擎:

        在表级、列级权限控制的基础上,还需要灵活的规则引擎来实现行记录级的权限控制。

     6.业务级封装

        在规范数据接口之上,可以封装可重用的业务级接口。

3.数据的异构联合视图 

     在上面的基本服务提供了基本的分散数据源的集中统一访问点之后, 数据联合模式 ,将分散在位置透明的多种数据源(DB,WebService),多个数据表中的数据,联合成一个更大的有业务意义的信息视图,支持其即时联合查询与有限的更新能力。

4.数据的拉取整合同步 

     数据整合模式 ,支持连接于数据总线上的数据服务进行纵向的整合。

     比如,当多个自治的独立异构数据源(地域分公司,并购企业)中,都存在核心的业务实体--主数据(如客户,订单),可进行叠加转换后,提供统一的只读数据集。

     整合的方式有两种,一种是各数据源主动调用总数据集的基本服务接口进行发布。而另一种模式则是数据总线主动对各数据源进行拉取。

5.Google Base

     Google Base 是Google的公共数据库服务,大家可以使用公共对象类型或者设定自己的类型,然后使用GData API  对自己存放在GBase里的数据进行增删改查操作。

     看看GBase的Demo页面 ,一个很REST的简单直接操作HTTP/REST方案,另外也有Java/C#版的稍嫌冗繁的API,但都逃不开手工或使用client API读取XML,转化为语言对象的动作。

6. BEA Data Service Platform

支持基本服务接口,输出Web Service,SDO,JDBC(只读)等操作接口,偏重于基于XQuery的异构数据横向联合查询。

7.其他参考资料

 


DataQuery 支持Oracle mySQL ,SqlServer 等多种数据库的相关查询操作 立即下载

相关推荐

远程访问数据库的数据库中间件方案

现在PDA的应用越来越广泛,但是PDA上能够支持的数据库种类比较有限,并且PDA对网络的访问现在也比较便利。随着数据的网络化处理的要求越来越高,很多场合都有使用PDA来远程访问数据库的需求。

实习一远程过程调用中间件及数据访问中间件定义.pdf

实习一远程过程调用中间件及数据访问中间件定义.pdf

SatRDA数据服务组件20161118

SatRDA是目前最高效的远程数据访问组件,大数据量测试比外网直连数据库速度提升10-200倍。使用它无需要改动原来的数据连接访问代码就可以支持外网访问远程数据库。能够为android/ios等APP提供restful架构的数据接口。支持支付宝支付。部署非常简单,服务器客户端都无需安装,也无需安装iis,tomcat等其它软件。服务器端使用谷歌的golang开发支持10M级并发。

[原创]HBase客户端开发举例(第三部分)

4.创建QueryDataClient.java ,其代码如下 public class QueryDataClient {      // 表名为jvmMonitor     public final static String TABLE_NAME = "jvmMonitor";      //列族名 "target", "memory", "os"     public fin

荒岛码农 552

SatRDA数据服务组件20160624

SatRDA是目前最高效的远程数据访问组件,大数据量测试比外网直连数据库速度提升10-200倍。使用它无需要改动原来的数据连接访问代码就可以支持外网访问远程数据库。能够为android/ios等APP提供restful架构的数据接口。提供http上传下载api,支持消息推送,部署非常简单,服务器客户端都无需安装,也无需安装iis,tomcat等其它软件。使用google的golang开发,支持大并发。

SatRDA远程服务.zip_SATRDA 免费下载_satrda_satrda.dll_satrda下载_union3za

satrda远程数据访问组件,高效提升数据库访问速度

大型前端应用状态管理实战:从 Redux 到 React Query 的演进之路

理解不同类型的状态选择合适的管理方案持续优化和改进保持代码的可维护性有什么问题欢迎在评论区讨论,我们一起学习进步!

ChengFengTech的博客 707

LabVIEW QMH模板实战:从创建到错误处理的完整指南

本文提供LabVIEW QMH模板从创建到错误处理的完整实战指南。详细解析了队列消息处理器(QMH)作为LabVIEW核心设计模式如何实现任务解耦与异步通信,涵盖事件处理循环、消息处理循环的搭建、用户事件创建、队列引用管理、消息优先级控制以及健壮的错误处理机制,帮助开发者构建稳定、可维护的复杂应用程序。

white的博客 727
上一篇: Spring 2.5 Perfomance Improvements 200% 直逼 Guice
下一篇: 真正的maven私服搭建器--Artifactory
techweb
博客等级 码龄19年 226粉丝 3842原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值