ogg 12.3 for sqlserver 2016/2014 CDC模式配置

本文详细介绍了如何使用OGG 12.3通过CDC(变更数据捕获)从SQL Server 2016 Enterprise抽取数据的全过程。包括软件安装、数据库配置、创建schema、测试表、全局文件、同步用户、启动SQL Agent、启用CDC、创建ODBC、添加交易数据、创建清理任务和配置抽取进程等关键步骤。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

本文主要讲述ogg 12.3 通过CDC抽取mssqlserver 2016 enterprise的过程,以sqlserver为目标端投递配置相对简单,所以在此不在赘述。

针对以前的mssqlserver,是直接解析日志的模式,所以配置略有不同。

配置步骤概述

1.         解压ogg 12.3 for sqlserver软件,执行create subdirs,编辑mgr并启动。

2.         数据库安装配置,并打补丁

3.         create schema ogg

4.         创建测试表

5.         创建globals文件

6.         创建同步用户

7.         确保sqlagent能正常启动

8.         在源端DB上启用CDC

9.         创建ODBC

10.      add trandata

11.     创建清理历史变更数据的job

12.     建立抽取进程

13.     测试

 

 

安装过程

 

OGG软件及sqlserver 2016安装步骤在此省略。

 

 

补丁下载安装

安装完成sqlserver 2016 ent版本之后,还需要打补丁:

https://support.microsoft.com/en-us/help/3166120/fix-could-not-find-stored-procedure-sys-sp-cdc-parse-captured-column-l

 

源库上创建OGG schema

用于存放配置表,其中cdc schema由启用CDC步骤的存储过程创建。

clip_image001

语法:

USE [sourcedb]

GO

CREATE SCHEMA [ogg] AUTHORIZATION [dbo]

GO

 

创建测试表

use sourcedb;

create table dbo.test1 (id int primary key, name varchar(50));

create table dbo.test2( id int, name varchar(50), age int);

 

use targetdb;

 

create table dbo.test1 (id int primary key, name varchar(50));

create table dbo.test2( id int, name varchar(50), age int);

 

 

创建Globals文件

OGG目录下,新建globals文件,内容如下

ggschema ogg

 

创建OGG同步用户

创建访问DB的用户并赋权srcogg, tgtogg

clip_image002

 

clip_image004

目标端用户

clip_image006

 

启动sqlagent

agent用于启动CDC对应的job, 所以必须要启动agent才能正常同步。

clip_image007

 

 

源库上启用cdc

use sourcedb

EXECUTE sys.sp_cdc_enable_db


创建ODBC

如果需要远程捕获sqlserver,则只要配置通过odbc能远程访问DB即可实现。

clip_image011

 

clip_image013

 

 

OGG trandata

GGSCI>dblogin sourcedb srcdb, userid srcogg, password srcogg

GGSCI>add trandata dbo.test1

GGSCI>add trandata dbo.test2

 

执行完成之后,可以看到多了一张配置表

clip_image008

ogg.OracleGGTranTablesOGG 第一次add trandata自动创建。

 

 

创建OGG clean job

需要先删除DB自带的clean job

EXECUTE sys.sp_cdc_drop_job 'cleanup'

 

然后在OGG安装目录下,进入命令行,执行如下语句,其中(local)是默认的sqlserver实例

ogg_cdc_cleanup_setup.bat createjob srcogg srcogg sourcedb (local) ogg

其中: srcogg为用户名及密码,source为源DB的名称,(local)sqlserver实例, ogg为对应的schema

 

此时,会再增加两张配置表:

clip_image009

and add a new job

clip_image010

 

配置抽取进程

GGSCI (DESKTOP-V8IQDQP) 6> view param exsrc

extract exsrc

 

sourcedb srcdb, userid srcogg, password srcogg

exttrail ./dirdat/aa

 

table dbo.*;

 

 

add extract exsrc, tranlog, begin now

add exttrail ./dirdat/aa, extract exsrc

 

 

测试

 

insert into dbo.test1 values(1, 'bc是中kos');

 

clip_image015

 

clip_image016

 

可以看到正常捕获数据。

 

转载于:https://www.cnblogs.com/margiex/p/10472690.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值