
实时数据传输
jerry-89
这个作者很懒,什么都没留下…
展开
-
OGG同步MySQL数据
Mysql 5.6->Mysql 5.6 (linux -> win)以《installing and Configuring Oracle GoldenGate for MySQL.pdf》为准。字符集转换只能支持库级的字符集源端必须是innodb存储引擎目标库是mysql的话,replicat通过native api连接用户:要有对information_schema数据库读的权限。源:select any table或者select on database.table的权转载 2020-08-21 11:40:52 · 570 阅读 · 0 评论 -
如何清除OGG配置
(1)查看当前的OGG状态 info all 两端都要看 (2)清理进程配置 GGSCI (suys1) 92> dblogin userid ogg, password ogg Successfully logged into database. GGSCI (suys1) 93> stop EXTRACT DP01 EXTRACT DP01 is already stopped. GGSCI (suys1...原创 2020-08-20 10:24:12 · 877 阅读 · 0 评论 -
OGG故障错误处理总结
第一章GoldenGate错误分析与处理在维护GoldenGate过程中,由于各种意外情况,难免还是会遇到各种各样的问题。掌握一些常见的GoldenGate故障诊断和错误分析的方法是非常有必要的,而且掌握这些错误分析工具也进一步加深对GoldenGate产品的认识与对GoldenGate原理的理解。1.1 GoldenGate常见异常处理GoldenGate运行起来后,随着时间的推移可能会碰到各种各样的问题,下面就来介绍常见的异常现象以及常见的异常处理方法。1.1.1 异...转载 2020-08-19 17:13:39 · 8791 阅读 · 1 评论 -
MySQL到MySQL的同步 (库)
使用GoldenGate完成MySQL到MySQL的同步 (一)基础环境配置 源库 目标库 操作系统版本 CentOS Linux release 7.4 CentOS Linux release 7.4 IP地址 192.168.10.11 192.168.10.12 数据库版本 社区版 5.7.24 社区版 5.7.24 需要同步的数据库 testdb(所有表) testdb_repl GoldenGat..转载 2020-08-19 13:55:18 · 977 阅读 · 0 评论 -
Golden Gate - 概念和机制
Oracle Golden Gate - 概念和机制 (ogg)Golden Gate(简称OGG)提供异构环境下交易数据的实时捕捉、变换、投递。OGG支持的异构环境有:GoldenGate能够支持多种拓扑结构,包括一对一,一对多,多对一,层叠和双向复制等等。GoldenGate基本架构OGG的特性:对生产系统影响小:实时读取交易日志,以低资源占用实现...原创 2020-04-13 13:42:38 · 5750 阅读 · 0 评论 -
Otter-安装配置
简介OTTER是阿里巴巴公司为了解决杭州/美国机房数据间同步研发的一个开源软件。OTTER基于数据库增量日志解析,准实时同步到本机房或异地机房的mysql/oracle数据库,是一个分布式数据库同步系统。工作原理图:原理描述:基于Canal开源产品,获取数据库增量日志数据。 典型管理系统架构,manager(web管理)+node(工作节点) manager运行时推送...原创 2020-02-18 10:57:06 · 1597 阅读 · 0 评论 -
数据同步组件otter环境搭建
一、otter介绍 部分说明引用阿里otter项目的wiki 。阿里otter工具地址:https://github.com/alibaba/otter/wikiotter为阿里的一款增量数据同步工具,基于数据库增量日志解析,准实时同步到本机房或异地机房的mysql/oracle数据库. 一个分布式数据库同步系统。 公司最近需要把线下的数据同步到云仓,选用了otte...转载 2020-03-10 10:27:57 · 1885 阅读 · 1 评论 -
datax安装+配置
1、下载压缩包下载页面地址:https://github.com/alibaba/DataX不要在【Clone or download】处下载,那里下载的是源码;对于Java不是很在行的人来说,自行编译显得有点困难。而是在:【Quick Start】--->【Download DataX下载地址】进行下载。下载后的包名:datax.tar.gz。解压后{datax}目录下有{bin...原创 2020-03-11 17:24:45 · 2079 阅读 · 0 评论 -
GoldenGate for mysql to mysql:单向同步
GoldenGate用于在各种企业系统间以亚秒级速度复制和集成事务数据,是同类最佳的、易于部署的产品。GoldenGate 可以灵活地在同类和异类系统(包括不同版本、不同的硬件平台)之间移动数据。 Oracle 于 2009 年收购了 GoldenGate,我们可以看到在全球各行业超过 4,000 个解决方案中实施了 Oracle GoldenGate。该软件执行实时的、基于日志的更改数据捕...原创 2020-03-16 10:48:03 · 1882 阅读 · 0 评论