使用DRS将MySQL或Oracle数据库迁移到GaussDB

最新推荐文章于 2025-03-30 07:45:00 发布
最新推荐文章于 2025-03-30 07:45:00 发布
阅读量2.2k 收藏 31
点赞数 45
分类专栏： GaussDB经验总结 文章标签： 数据库 mysql gaussdb
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/GaussDB/article/details/144524301
版权

使用DRS将MySQL数据库迁移到GaussDB

解决问题

企业业务高速发展，传统数据库扩容性差，迫切需要分布式化改造。
传统数据库需要自购并安装服务器、系统、数据库等软件，运维成本高、难度大。
传统数据库性能瓶颈问题，复杂查询性能较差。
如何不中断业务并且平滑地实现数据迁移。

前提条件

拥有华为云账号。
账户余额大于等于0元。
如果测试使用，需要自行在本地搭建MySQL数据库。
已知待迁移MySQL数据库的IP地址，端口，账户和密码。
业务架构图

在这里插入图片描述

迁移原理

本次迁移使用全量+增量同步功能，原理如下：

全量同步阶段，先进行结构迁移，例如表、主键、唯一键的迁移。
结构迁移完成后，启动增量数据抽取，以确保全量数据同步期间的增量数据完整的抽取到DRS实例。

启动全量迁移任务。

全量迁移完成后自动进入增量同步，从全量迁移开始抽取的位点开始回放。
当增量回放全部完成后，启动比对任务进行一致性检查，支持实时比对。
实时比对数据一致时，可以启动业务割接。

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

步骤二：创建GaussDB实例

创建GaussDB实例，作为迁移任务目标库。

登录华为云控制台。

单击管理控制台左上角的，选择区域。
单击左侧的服务列表图标，选择“数据库 > 云数据库 GaussDB”。
在左侧导航栏选择GaussDB > 实例管理。
单击“购买数据库实例”。
参考图2，配置实例名称，选择计费模式、产品类型、数据库引擎版本、实例类型、事务一致性、分片数量、协调节点数量和可用区。

在这里插入图片描述
选择实例规格、存储空间大小。

选择实例所属的VPC（创建VPC）和安全组（创建安全组），配置数据库端口。

配置实例密码等信息。

单击“立即购买”，确认信息并提交。

返回实例列表。

当实例运行状态为“正常”时，表示实例创建完成。

参考文档

使用DRS将Oracle数据库迁移到GaussDB

使用DRS将Oracle数据库迁移至GaussDB (1)

使用DRS将Oracle数据库迁移至GaussDB

步骤一：创建VPC和安全组

创建VPC和安全组，为创建GaussDB实例准备网络资源和安全组。

创建VPC创建安全组

登录华为云控制台。
单击管理控制台左上角的，选择区域。
单击左侧的服务列表图标，选择“网络 > 虚拟私有云 VPC”。进入虚拟私有云信息页面。
单击“创建虚拟私有云”购买VPC。
图2 基本信息
在这里插入图片描述

图3 子网设置
在这里插入图片描述

单击“立即创建”。
返回VPC列表，查看创建VPC是否创建完成。
当VPC列表的VPC状态为“可用”时，表示VPC创建完成。

步骤二：创建GaussDB实例

创建GaussDB实例，作为迁移任务目标库。

登录华为云控制台。
单击管理控制台左上角的，选择区域。
单击左侧的服务列表图标，选择“数据库 > 云数据库 GaussDB”。
在左侧导航栏选择GaussDB > 实例管理。
单击“购买数据库实例”。

在这里插入图片描述
参考图6，配置实例名称，选择计费模式、产品类型、数据库引擎版本、实例类型、事务一致性、分片数量、协调节点数量和可用区。
基本信息

选择实例规格、存储空间大小。
图7 实例规格

在这里插入图片描述

选择实例所属的VPC（创建VPC）和安全组（创建安全组），配置数据库端口。
图8 选择VPC和安全组
在这里插入图片描述

配置实例密码等信息。
图9 配置实例密码等信息
在这里插入图片描述

单击“立即购买”，确认信息并提交。
返回实例列表。
当实例运行状态为“正常”时，表示实例创建完成。

步骤三：迁移前构造数据

迁移前需要在源库构造一些数据类型，供迁移完成后验证数据。本章中端到端的数据为测试数据，仅供参考。

使用DRS将Oracle数据库迁移至GaussDB

步骤一：创建VPC和安全组
创建VPC和安全组，为创建GaussDB实例准备网络资源和安全组。

创建VPC创建安全组
登录华为云控制台。
单击管理控制台左上角的，选择区域。
单击左侧的服务列表图标，选择“网络 > 虚拟私有云 VPC”。进入虚拟私有云信息页面。
单击“创建虚拟私有云”购买VPC。

单击“立即创建”。
返回VPC列表，查看创建VPC是否创建完成。
当VPC列表的VPC状态为“可用”时，表示VPC创建完成。

步骤二：创建GaussDB实例

创建GaussDB实例，作为迁移任务目标库。

登录华为云控制台。
单击管理控制台左上角的，选择区域。
单击左侧的服务列表图标，选择“数据库 > 云数据库 GaussDB”。
在左侧导航栏选择GaussDB > 实例管理。
单击“购买数据库实例”。

配置实例名称，选择计费模式、产品类型、数据库引擎版本、实例类型、事务一致性、分片数量、协调节点数量和可用区。

选择实例规格、存储空间大小。

选择实例所属的VPC（创建VPC）和安全组（创建安全组），配置数据库端口。
选择VPC和安全组

配置实例密码等信息。

单击“立即购买”，确认信息并提交。
返回实例列表。
当实例运行状态为“正常”时，表示实例创建完成。

步骤三：迁移前构造数据
迁移前需要在源库构造一些数据类型，供迁移完成后验证数据。本章中端到端的数据为测试数据，仅供参考。

语法说明
标题文本样式列表图片链接目录代码片表格注脚注释自定义列表LaTeX 数学公式插入甘特图插入UML图插入Mermaid流程图插入Flowchart流程图插入类图快捷键

使用DRS将MySQL数据库迁移到GaussDB
m0_60569209的博客
10-29 1541
本章主要介绍如何使用DRS的实时同步功能将本地MySQL数据库实时迁移至华为云GaussDB。通过全量+增量同步，实现源数据库MySQL与目标数据库GaussDB的数据长期同步。
使用DRS将Oracle数据库迁移至GaussDB
Oliviahome的博客
10-29 984
配置同步实例信息，选择“数据流动方向”、“源数据库引擎”、“目标数据库引擎”、“网络类型”、“DRS任务类型”、“目标数据库实例”、“同步实例所在子网”、“同步模式”、“指定公网IP”（网络类型选择公网网络时需要配置该参数）、“规格类型”、“可用区”和“企业项目”，选填“标签”。由于本次迁移为“全量+增量”同步模式，全量同步完成后，如果在创建任务后有数据写入，这些写入的数据会一直同步至目标库中，直到任务结束。将“COL_01_CHAR______E”重新命名为“new-line”，单击“确定”。
基于 DRS 的 MySQL → GaussDB 迁移技术方案
最新发布
lionDB的博客
03-30 908
通过华为云 DRS 实现 MySQL → GaussDB 迁移，可显著降低人工操作风险，确保分钟级业务停机和100% 数据一致性。迁移后建议结合 GaussDB 的分布式特性​（如读写分离、分片表）进一步优化业务性能。
MySQL篇——MySQL迁移GaussDB的PG模式讲解，涵盖AWS SCT、AWS Database Migration Service（AWS DMS）详细介绍，实战经验！
我热爱学习，也乐于分享。无论是科技前沿的洞见，还是生活中的小技巧，我都会在这里与你分享。我相信，知识就是力量，而分享则能让这份力量得到更好的传递。
01-16 2527
通过AWS Schema Conversion Tool工具实现评估和做数据转换AWS Schema Conversion Tool（SCT）是一款免费的AWS工具，用于将现有数据库架构从一个数据库引擎转换为另一个数据库引擎。SCT支持多个源数据库和目标数据库，可以转换关系OLTP架构或数据仓库架构。
Mysql迁移到GaussDb_使用DataSync迁移数据到Gaussdb T
weixin_42211324的博客
01-19 1101
摘要：DataSync支持GaussDB 100(GaussDB T)在线迁移和Sybase、Oracle、MySQL、 GaussDB 100 V100R003C10、SQL Server离线迁移两种数据迁移方式。本文主要以MySQL示例，分步骤在线迁移MySQL到Gaussdb 100一、DataSync迁移数据简介DataSync支持GaussDB 100(GaussDB T)在线迁移和Sy...
Mysql迁移到GaussDb_GaussDB T 使用DUMP/LOAD导出导入迁移备份数据
weixin_35973118的博客
01-19 1259
GaussDB T 支持使用dump和load将数据库中的数据导出成标准化通用文件，可使用gaussdb T 的 load导入Oracle、MySQL、SQLserver等数据库导出的文件，同时也可以使用dump导出gaussdb T 的数据，然后导入到其他数据库或者其他gaussdb数据库。功能类似于Oracle的sqlldr，同时也可用于第三方工具导入到其他数据库中。这种通用格式的文件内容如下...
再识华为云数据库——GaussDB
weixin_57156550的博客
10-28 716
华为云数据库 GaussDB是一款拥有云上高可用，高可靠，高安全，弹性伸缩，一键部署，快速备份恢复，监控告警等关键能力，能为企业提供功能全面，稳定可靠，扩展性强，性能优越的企业级数据库服务。同时具有PB级海量数据存储、实时高效访问、自动化运维等特点，广泛应用于金融、电信、物流、电商、政体等行业，成为行业最受欢迎的企业级数据库之一。同时，打造数据库结构+ 应用+数据一站式迁移工具方案，让客户选型安心、迁移放心、管理省心，目前已经规模应用在金融、电 信、泛政府、能源、交通、互联网等各行业。
使用DRS将MySQL数据库迁移到GaussDB（3）
Oliviahome的博客
10-29 651
创建DRS实例，将本地MySQL上的数据库同步到GaussDB实例中数据库中。
mysql 迁移 gaussdb_示例：从MYSQL向GaussDB(DWS)进行数据迁移
weixin_42512021的博客
02-03 1126
//以下用例以gsjdbc4.jar为例，如果要使用gsjdbc200.jar，请替换驱动类名(将代码中的“org.postgresql”替换成“com.huawei.gauss200.jdbc”)与连接URL串前缀(将“jdbc:postgresql”替换为“jdbc:gaussdb”)。import java.io.StringReader;import java.sql.Connection...
MySQL项目迁移华为GaussDB PG模式指南
日拱一卒无有尽，功不唐捐终入海
08-27 7852
本文是关于如何将MySQL项目迁移到华为GaussDB PG模式的详细教程。背景：在当今的国际形势严峻，很多卡脖子的技术搞得我们国内奋发图强，以华为为代表的国产数据库。在很多国企的系统中已经开始迁移。国产数据库的重要性不言而喻。本文整理总计了一下从MySQL迁移到华为的GaussDB PG模式。这两种数据库在核心上有很大的不同，因此这个迁移过程可能会遇到一些困难。本文将详细介绍如何进行这种迁移，包括数据迁移，表结构迁移，以及索引、触发器、存储过程和函数的迁移等步骤。
mysql迁移到高斯DB_【HICP Gaussdb】数据库 升级迁移维护-2
weixin_28197941的博客
01-28 733
DM-Data Manager 集群管理web工具数据库升级1、检查版本 依次升级、升级前全备数据2、磁盘空间不小于表预留空间3、 确保数据库对包有一定权限4、升级后正常启停 python zctl.py -t start5、升级前必须停止业务6、确保控制软件对数据库没有进行 实例关闭 拉起 主备切换 容灾 备份 触发定时任务 否则失败无法回滚升级流程 升级检查环境 pre-check --&...
迁移mysql数据库到opengauss
FinelyYang的专栏
02-03 1732
openGauss侧使用的用户名密码分别是 gaussdb和 gaussdb@1qazx。openGauss服务器的IP和port分别是192.168.132.153和5432，目标数据库是db_smis，同时会在db_smis下创建schema：db_smis，迁移的表都将位于该schema下。迁移数据时，MySQL侧使用的用户名密码分别是 usr_replica 和 re@1qazx。MySQL服务器的IP和port分别是192.168.132.153和3306，待迁移的数据库是db_smis。
使用DRS将MySQL数据库迁移到GaussDB（2）
Oliviahome的博客
10-29 200
如测试连接成功，将提示“连接成功”，您可继续新增操作。如测试连接失败，将提示连接失败原因，您需根据提示信息进行修改，以便新增数据库登录成功。选择“数据库引擎”、“数据库来源”，填写登录用户名、密码以及描述（非必填项）信息，开启SQL执行记录功能。在数据管理服务DAS左侧导航栏，单击“开发工具”，进入开发工具数据库登录列表页面。单击左侧的服务列表图标，选择“数据库 > 数据管理服务 DAS”。单击“新增数据库实例登录”，打开新增数据库实例登录窗口。新增完成后，单击新增登录的“登录”，登录当前数据库。
mysql改utf-8编码格式_mysql更改utf8编码方式
weixin_35831969的博客
01-19 114
show variables like 'character_set_%';+--------------------------+-----------------------------------------------------------+| Variable_name | Value ...
国产数据库GaussDB MySQL数据迁移同步实践
ZaxfSass的博客
09-17 541
通过连接到两个不同的数据库系统，并使用合适的代码来选择和插入数据，我们可以实现数据的迁移和同步。请确保将"your_database"、“your_user”、“your_password”、"your_host"和"your_port"替换为实际的数据库名称、用户名、密码、主机和端口。请将"your_host"、“your_port”、“your_user”、"your_password"和"your_database"替换为实际的主机、端口、用户名、密码和数据库名称。
GaussDB(DWS)数据库的数据迁移实操【玩转PB级数仓GaussDB(DWS)】
一键难忘的博客
01-16 1979
华为公司智能数据平台CTO武新曾说，数据库需要长期扎实的投入，华为态度非常坚定，目标是要像5G一样，打造中国出品的世界级数据库GaussDB，在不久的将来实现全面超越并引领数据库技术的发展。在华为GaussDB发布中有一行文字：向数学致敬、向科学家致敬。前人的积累必将影响我们现在的科技。GaussDB，不仅蕴含着华为对数学和科学的敬畏，也承载着华为对基础软件的坚持和梦想以及我们中国人，中国IT人对国产数据库的未来与希望。
系统国产化数据库Gaussdb改造方案
03-30
<think>好的，我现在需要帮助用户寻找关于将系统迁移到国产化数据库GaussDB的改造方案。用户还提到了迁移与改造方案的系统适配最佳实践。首先，我应该回顾一下用户提供的引用内容，看看有没有相关的信息可以整合。 引用[2]提到GaussDB迁移的策略、工具和最佳实践，以及企业面临的挑战，这可能有用。引用[3]讨论了国产数据库替换Oracle的注意事项，比如需要全面调研和制定移植方案，这可以应用到GaussDB迁移中。引用[4]详细介绍了OpenGauss的架构和优化，而GaussDB可能与OpenGauss有相似之处，所以这里的技术细节可能有参考价值。引用[5]提到OLTP和OLAP的需求，这可能影响迁移策略。 接下来，我需要构建一个结构清晰的迁移方案。通常，数据库迁移包括评估、设计、改造、迁移、验证和优化几个阶段。在评估阶段，需要分析现有系统的架构、数据量和应用特性，正如引用[3]所述。然后，进行兼容性分析，检查SQL语法、存储过程等是否需要调整，引用[4]提到GaussDB与PostgreSQL兼容，这可能简化部分工作。 在架构设计方面，引用[5]提到的OLTP和OLAP需求可能需要不同的处理方式，比如分库分表或读写分离。引用[2]中的高可用性和数据安全也是设计重点。数据迁移工具方面，可能需要使用华为提供的工具，或者开发定制脚本，引用[3]建议制定完好的移植方案以减少成本。 应用改造部分，代码层需要替换Oracle特有的语法和函数，可能涉及ORM框架的调整。引用[4]提到GaussDB的优化可能影响性能调优策略。测试验证阶段需要全面的测试，确保功能和性能达标，引用[3]和[2]都强调了这一点。 最佳实践方面，分阶段迁移和灰度发布是常见策略，引用[3]提到分阶段减少风险。培训团队和生态兼容性也很重要，引用[4]指出GaussDB与PostgreSQL生态兼容，可能有助于降低学习成本。另外，安全合规是必须的，引用[2]提到高安全特性。 最后，相关问题的生成需要考虑用户可能进一步询问迁移工具、兼容性处理、性能优化和回退方案，这些都在迁移过程中常见。 需要确保回答符合用户的要求：结构清晰，分步骤，引用正确。同时，使用中文，数学公式正确应用，但问题中没有涉及数学内容，可能不需要公式。检查引用标记是否正确添加，例如在提到高可用性时引用[2]，架构设计引用[5]等。 现在组织这些点，确保每个部分都有对应的引用支持，并且逻辑连贯，帮助用户理解迁移的最佳实践。</think>### GaussDB国产化数据库迁移与改造方案系统适配最佳实践 #### 一、迁移前评估与规划 1. **系统现状分析** - 梳理现有数据库架构（如Oracle/MySQL等），分析业务场景、数据量（日均增量、总量）、事务并发量等关键指标[^3][^5]。 - 识别核心业务模块的SQL特性（如存储过程、触发器、复杂查询语句）及性能敏感点[^3]。 2. **兼容性评估** - **语法兼容性**：GaussDB基于PostgreSQL增强开发，支持大部分标准SQL语法，但需重点检查Oracle特有语法（如`ROWNUM`、`CONNECT BY`）的替换方案[^4]。 - **数据类型映射**：例如将Oracle的`NUMBER`类型转换为GaussDB的`NUMERIC`，`VARCHAR2`转换为`VARCHAR`。 - **函数与过程适配**：使用GaussDB的PL/pgSQL重构Oracle PL/SQL代码。 #### 二、架构设计与适配方案 1. **分布式架构选择** - **OLTP场景**：采用GaussDB主备集群模式，通过读写分离提升并发能力[^2][^5]。 - **OLAP场景**：启用行列混合存储引擎，结合分片策略（如哈希分片）实现海量数据高效分析。 2. **高可用设计** - 部署两地三中心容灾方案，通过GTM（全局事务管理器）保障跨节点事务一致性。 - 配置自动故障切换（Failover），满足RPO=0、RTO<30秒的金融级要求[^2]。 #### 三、数据迁移与工具链 1. **迁移工具选择** - 使用华为**DRS（Data Replication Service）**实现全量+增量迁移，支持异构数据库在线同步。 - 复杂对象（如存储过程）采用**Schema Conversion Toolkit**进行自动化转换。 2. **迁移流程** ```text 源库评估 → 目标库资源准备 → 全量迁移 → 增量同步 → 数据一致性校验 → 业务割接 ``` #### 四、应用层改造要点 1. **代码适配** - **JDBC驱动**：替换为`org.postgresql.Driver`，调整连接参数（如`prepareThreshold=0`规避游标限制）。 - **SQL改写**示例： ```sql -- Oracle原生分页 SELECT * FROM (SELECT t.*, ROWNUM rn FROM table t) WHERE rn BETWEEN 10 AND 20; -- GaussDB改写 SELECT * FROM table ORDER BY id LIMIT 10 OFFSET 10; ``` 2. **事务控制优化** - 将Oracle的`SELECT ... FOR UPDATE`替换为GaussDB的`SKIP LOCKED`或`NOWAIT`语法避免锁竞争。 - 分布式事务通过**全局事务ID（XID）**保证跨节点ACID特性。 #### 五、测试验证与性能调优 1. **基准测试** - 使用**TPC-C**测试OLTP吞吐量，**TPC-H**验证复杂查询性能，对比迁移前后指标。 - 压力测试公式： $$TPS = \frac{\text{并发用户数} \times \text{事务成功率}}{\text{平均响应时间（秒）}}$$ 2. **索引优化** - 对高频查询字段添加**GIN（通用倒排索引）**，对范围查询使用**BRIN（块范围索引）**[^4]。 - 通过`EXPLAIN ANALYZE`分析执行计划，优化慢查询[^4]。 #### 六、运维监控体系 1. **智能运维** - 部署**GaussDB Manager**实现集群监控、备份恢复、弹性扩缩容[^2]。 - 配置SQL防火墙规则拦截高风险操作（如全表删除）。 #### 七、最佳实践总结 1. **分阶段迁移**：优先迁移非核心业务模块，验证稳定后再处理关键系统。 2. **生态兼容**：利用GaussDB与PostgreSQL生态兼容性，快速集成第三方工具（如Pentaho、Tableau）。 3. **安全合规**：启用透明数据加密（TDE）和动态数据脱敏功能，满足等保2.0三级要求[^2]。 ---
评论 9
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Gauss松鼠会

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值