数据库迁移系列】从MySQL到openGauss的数据库对象迁移实践

MySQL到openGauss对象迁移实践,
最新推荐文章于 2025-07-03 18:22:45 发布
原创 最新推荐文章于 2025-07-03 18:22:45 发布 · 619 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#adb

数据库迁移系列】从MySQL到openGauss的数据库对象迁移实践

原创 酷哥 openGauss 2022-11-07 18:03 发表于广东

9月30日新发布的openGauss 3.1.0版本 ，工具的全量迁移和增量迁移的性能不但有了全面提升，而且支持数据库对象视图、触发器、自定义函数、存储过程的迁移。

  • 工具链：MySQL全量迁移支持并行迁移，提升全量迁移性能

    通过支持表级并行迁移，提升MySQL全量迁移性能，基于sysbench测试模型，在Kunpeng-920 2p服务器上，10张表（单表容量三百万以上）使用10并发迁移，可达到大于300M/s的迁移性能。

  • 工具链：MySQL增量迁移支持十五级并行消费，提升增量迁移性能

    基于开源三方件mysql-binlog-connector-java解析mysql的binlog, 并根据mysql主备进行复制的原理，对可并行的事务在openGauss端采用多线程进行并行回放，以实现MySQL到openGauss的在线迁移。

    利用sysbench对MySQL压测，在10张表30个线程并发情况下，IUD混合场景下，在Kunpeng-920 2p服务器上测试整体增量迁移性能可达3w tps.

  • 工具链：支持基于默克尔树的数据校

    实现基于默克尔树的数据实时校验工具，支持MySQL数据迁移到openGauss时，源端与目的端数据全量和增量校验。

本篇就来分享一下使用chameleon工具进行从MySQL到openGauss的数据库对象迁移实践。

软件安装

  1. 由于我之前已经安装过3.0版本的工具了，需要先卸载一下。

[root@pekphisprb70593 chameleon]# pip3 uninstall chameleon
Uninstalling chameleon-3.0.0:
Would remove:
/usr/local/python3/bin/chameleon
/usr/local/python3/bin/chameleon.py
/usr/local/python3/lib/python3.6/site-packages/chameleon-3.0.0.dist-info/*
/usr/local/python3/lib/python3.6/site-packages/pg_chameleon/*
Proceed (y/n)? y
Successfully uninstalled chameleon-3.0.0
[root@pekphisprb70593 chameleon]# rm -rf chameleon-3.0.0-py3-none-any.whl

2.从官网https://opengauss.org/zh/supporttools.html 获取获取工具包：chameleon-3.1.0-py3-none-any.whl

图片

3.将新的3.1.0工具上传到openGauss数据库所在节点的chameleon文件夹下。

[root@pekphisprb70593 chameleon]# python3 -m venv venv
[root@pekphisprb70593 chameleon]# source venv/bin/activate
最低0.47元/天 解锁文章
Mysql 与 openGauss 性能视图比较
2401_83143557的博客
03-20 1737
与 Mysql 的 Performance_schema 类似，openGauss 本身也提供类似的性能监控视图。但与 Mysql 也存在差异，本文就针对两者异同做个比较。Mysql 的性能监控视图保存在 performance_schema schema 下，openGauss 主要保存在 dbe_perf schema 下。本人主要比较 statement，wait event 和 io 相关视图。从上面的分析可以看出 Mysql 的系统监控表与 openGauss 还是有挺大差别。
MySQL到OpenGauss的数据迁移测试
2401_83143557的博客
03-21 857
前言本文将测试利用 chameleon 工具从 MySQL 迁移数据到 OpenGauss3.1.0。环境。
高斯数据库和ORCLE、mysql数据库的区别
samHuangLiang的博客
03-18 1957
3. GaussDB：面向云原生和分布式场景，适合需要弹性扩展、混合负载（HTAP）或国产化替代需求的企业（如政务云、物联网大数据）。均提供主从复制、集群部署等方案（如 Oracle Data Guard、MySQL 主从复制、GaussDB 分片多副本）。-均基于关系模型，支持 *SQL 语法*，提供事务的 *ACID*（原子性、一致性、隔离性、持久性）保障。1. Oracle：适合预算充足、需要复杂事务处理与高稳定性的传统企业核心系统（如银行、电信）。1. 关系型数据库核心特性。
Mysql迁移OpenGauss
weixin_44739106的博客
03-10 7290
公司要做信创的迁移，本文简单描述了一下Mysql迁移到OpenGauss的大概流程步骤
openGauss 数据迁移指南：MySQL迁移—MySQL语法兼容性评估工具
weixin_53596073的博客
06-29 2695
openGauss兼容性评估工具，支持从多个场景下获取sql语句进行兼容性评估，并输出评估报告。支持从mysql端采集sql语句，支持从mysql端采集以下几种sql类型：对象定义语句（DDL）。慢sql语句。此类sql通过查询mysql.slow_log表获得，需要用户开启慢sql记录至该表中。全量sql语句。此类sql通过查询mysql.general_log表获得，同样需要用户开启general log记录至该表中。支持从文件中获取sql语句，支持以下几种文件类型：sql文件。
【数据库迁移系列】使用pgloader将数据从MySQL迁移到openGauss的最佳实践
2401_89872625的博客
01-13 1409
云原生数据库openGauss也支持若干数据库迁移工具，其中的pgloader是一个数据导入工具，使用COPY命令将数据导入到PostgreSQL。pgloader有两种工作模式，一种是从文件导入，一种是迁移数据库。pgloader在两种情况下都使用PostgreSQL的COPY协议高效的传输数据。openGauss兼容PostgreSQL的通信协议以及绝大部分语法，本文就介绍如何使用pgloader将MySQL数据库迁移至openGauss。
数据库迁移：mysql修改为opengauss
猴子的博客
01-30 1686
原有的项目中使用mysql数据库保存应用数据，后面由于国产化要求，需要替换mysql为opengauss。按照如下配置，仅需修改配置文件，就可以在mysql和opengauss之间切换。代码结构如下，文件中mapper和gaussmapper分别为mysql和opengauss使用的mapper.xml文件。mysql函数pg不支持，如str_to_date,ifnull等，因此迁移数据库，需要修改之前的mapper文件。2、配置数据源，在原有mysql的基础上增加opengauss数据源配置。
mysql迁移到openGauss数据库笔记
qq_48433464的博客
12-01 1738
mysql迁移到opengauss笔记
从0到1去搭建一整套openGauss生态（3）-迁移mysql至openGauss
hnewo_pdaye的博客
03-13 423
高版本的用户默认加密方式有变化、以及一些环境变量被删除，无法进行迁移（这个后续我会出一个问题集来说明，本人用mysql8.4.2进行迁移，遇到了等等问题）环境需要jdk11+，这里的服务器可以不和openGauss的服务器在一起，建议分开来，之前我在欧拉22.03安装时候出现异常把环境搞坏了，这个问题已经反馈给社区，后续去修复。2.目前对存储过程、函数等支持不友好，需要自己去修改mysql语法进行迁移。先点击权限检测，看看选择的权限是否符合：通过。点击开始安装，选择安装方式以及安装版本。
迁移MySQL数据库至openGauss
Oliviahome的博客
03-21 359
对象、数据全量离线迁移；数据全量&增量校验；
系统国产化替代方案（三）Mysql数据迁移至OpenGauss
qq_41057525的博客
09-04 4292
原因是我还没试过这个版本行不行，需要重新安装新版本OpenGauss。创建datakit数据库和迁移目标数据库testdb。访问https://ip:9494。吐槽一句：都是泪，踩了一遍又一遍的坑>~
【原创】国产化适配-全量迁移MySQL数据到OpenGauss数据库
最新发布
DCTANT的博客
07-03 1713
摘要：作者在将MySQL迁移到OpenGauss时遇到官方工具bug，选择自研解决方案。文章详细对比了两种数据库的表结构差异，包括数据类型转换（如VARCHAR改为NVARCHAR2）、索引处理等关键问题。作者开发了开源迁移工具，仅26MB大小，支持分页查询、线程池优化和转义处理，并提供详细的迁移报表。该项目已在Gitee开源（https://gitee.com/decentant/mysql-to-opengauss），解决了官方工具长期未修复的问题，实现了更轻量高效的数据库迁移方案。
openGauss 数据迁移指南：MySQL迁移—全量迁移
weixin_53596073的博客
06-29 1864
全量迁移gs_mysync是一个用Python3编写的将MySQL迁移至openGauss的复制工具，支持初始全量数据的复制功能。gs_mysync通过一次初始化配置，使用只读模式，将MySQL的数据全量拉取到openGauss。支持在同一快照下，表间数据并行迁移。全量迁移支持的功能：支持表及表数据、视图、触发器、自定义函数、存储过程的全量迁移。
openGauss 数据迁移指南：MySQL迁移—数据校验
weixin_53596073的博客
06-29 1330
数据校验工具 gs_datacheck，分为check服务和extract服务。check服务用于数据校验，extract服务用于数据抽取和规整。全量校验：在全量数据迁移完成后，由extract服务对源端和目标端数据通过JDBC方式进行数据抽取然后规整计算，并将计算后的中间数据推送到kafka中。最后由check服务提取kafka中的中间数据，构建默克尔树，通过默克尔树比对实现表数据校验且输出校验结果。增量校验：由debezium服务侦听源端数据库的增量数据，到指定topic。
【数据库】Mysql数据迁移到Opengauss
大壮
01-14 1475
openGauss是一款开源的关系型数据库管理系统，它具有多核高性能、全链路安全性、智能运维等企业级特性。openGauss内核早期源自开源数据库PostgreSQL，融合了华为在数据库领域多年的内核经验，在架构、事务、存储引擎、优化器及ARM架构上进行了适配与优化。作为一个开源数据库，期望与广泛的开发者共同构建一个多元化技术的开源数据库社区。openGauss架构高性能openGauss突破了多核CPU的瓶颈，实现两路鲲鹏128核150万tpmC，内存优化表（MOT）引擎达350万tpmC。
Mysql迁移数据到openGauss
qq_42692161的博客
05-30 535
下载源码，官方地址：https://github.com/dimitri/pgloader。
迁移mysql数据库到opengauss
FinelyYang的专栏
02-03 1910
openGauss侧使用的用户名密码分别是 gaussdb和 gaussdb@1qazx。openGauss服务器的IP和port分别是192.168.132.153和5432，目标数据库是db_smis，同时会在db_smis下创建schema：db_smis，迁移的表都将位于该schema下。迁移数据时，MySQL侧使用的用户名密码分别是 usr_replica 和 re@1qazx。MySQL服务器的IP和port分别是192.168.132.153和3306，待迁移的数据库是db_smis。
opengauss 上mysql_fdw的编译、安装和使用
howard_shooter的博客
04-28 1088
然后在build_dir/libmariadb目录下生成了libmariadb.so，将它复制到opengauss/lib目录下，上面的操作，在每个节点上都要这么作。其中libmariadb.so可以在复制到安装包里，安装分发时就有了。
迁移MySQL到openGauss，DataKit嘎嘎猛~
weixin_53596073的博客
02-07 1344
对于在线模式的迁移任务，任务启动后，会首先进入全量迁移阶段，将MySQL端预置的数据迁移至目标库，全量迁移结束后会进入全量校验阶段，会输出每个表的校验结果；各插件围绕DataKit的资源中心进行扩展，完成数据库的运维，监控，迁移，开发，建模等复杂的操作。在datakit平台--资源中心--服务器管理中添加对应的服务器，被管理的机器才可用于安装迁移插件，本次实验用本机作为迁移插件的执行机。各插件围绕DataKit的资源中心进行扩展，完成数据库的运维，监控，迁移，开发，建模等复杂的操作。
如何将数据从达梦数据库迁移到opengauss
05-10
<think>好的，我需要帮助用户找到将数据从达梦数据库迁移到openGauss的具体方法或工具。首先，我应该回顾用户提供的引用内容。引用[1]提到数据迁移DTS可以将云上MySQL迁移到达梦，但用户现在需要的是达梦到openGauss的迁移。引用[2]则讨论了国产数据库的发展，并提到了openGauss和达梦都在流行度排行榜上，但并没有直接给出迁移方法。 接下来，我需要考虑可能的迁移方法。通常，数据库迁移可以通过使用官方工具、第三方工具或手动导出导入。达梦和openGauss都是国产数据库，可能有一些官方支持的工具。例如，openGauss可能有数据迁移工具，类似MySQL的mysqldump或者使用ETL工具。 另外，用户提到的DTS（数据迁移服务）虽然引用中是用于MySQL到达梦，但可能也有支持达梦到openGauss的版本，需要确认。此外，检查是否有开源工具或脚本，比如使用ODBC/JDBC连接两者，通过中间格式如CSV或SQL文件进行迁移。 还需要考虑数据兼容性问题，比如数据类型差异、字符集、函数和存储过程的不同。用户可能需要先进行数据结构的转换，再迁移数据。此外，事务处理和约束在迁移过程中也需要处理。 最后，应建议用户查阅openGauss的官方文档，或联系两者的技术支持获取专用工具。同时，分步骤指导：评估迁移需求、选择工具、结构转换、数据迁移、验证数据，以确保完整性。</think>### 达梦数据库迁移至openGauss的方法与工具 #### 一、迁移工具选择 1. **openGauss官方工具** openGauss提供数据迁移工具 **gs\_loader** 和 **gs\_dump**，支持从其他数据库（如达梦）通过中间文件（如CSV、SQL）导入数据[^2]。需先将达梦数据库导出为通用格式（如SQL脚本或CSV），再通过以下命令导入openGauss： ```bash gsql -d postgres -p 5432 -f /path/to/dameng_export.sql ``` 2. **第三方ETL工具** - **Kettle（PDI）**：通过JDBC连接达梦和openGauss，配置数据抽取、转换、加载流程。需提前下载达梦JDBC驱动（DmJdbcDriver）和openGauss JDBC驱动（opengauss-jdbc）[^2]。 - **DataX**：阿里开源工具支持异构数据库迁移，需编写自定义JSON配置文件，指定达梦作为源端，openGauss为目标端。 3. **达梦官方工具兼容性** 达梦的 **DTS迁移工具** 主要面向其他数据库迁移至达梦，反向迁移需手动处理，但可通过导出为SQL文件后适配语法差异。 --- #### 二、迁移步骤详解 1. **数据结构兼容性处理** - **表结构转换**：使用达梦的 `dbms_metadata.get_ddl` 生成DDL语句，手动调整数据类型（如达梦的 `VARCHAR2` 改为openGauss的 `VARCHAR`）。 - **约束与索引**：检查达梦的索引语法（如位图索引）是否与openGauss兼容，必要时重构。 2. **数据导出与导入** - **达梦端导出**： ```sql -- 使用dexp工具导出数据 ./dexp USERID=SYSDBA/SYSDBA@localhost:5236 FILE=dameng_data.dmp DIRECTORY=/data/backup ``` - **openGauss端导入**： ```bash # 使用gs_restore导入 gs_restore -U omm -W password -d opengauss_db /data/backup/dameng_data.dmp ``` 3. **代码层适配** - **存储过程/函数**：达梦的PL/SQL语法与openGauss的PL/pgSQL存在差异，需逐项改写。例如，达梦的 `DBMS_OUTPUT.PUT_LINE` 需替换为openGauss的 `RAISE NOTICE`。 - **事务控制**：确保达梦的隐式事务逻辑（如自动提交）与openGauss的显式事务模式（`BEGIN/COMMIT`）兼容。 --- #### 三、验证与优化 1. **数据一致性校验** 使用 **pg_comparator** 或自定义脚本对比关键表的数据量和校验和。 2. **性能调优** - 调整openGauss的 `shared_buffers` 和 `work_mem` 参数以优化导入速度。 - 在迁移后执行 `ANALYZE` 更新统计信息。 --- #### 四、参考案例与文档 - **openGauss官方迁移指南**：[《openGauss数据库迁移实践》](https://opengauss.org/zh/docs/2.0.1/docs/migration/migration.html) - **达梦与openGauss数据类型对照表**：需重点关注数值类型（如达梦的 `NUMBER(10)` 对应openGauss的 `NUMERIC(10)`）和日期函数差异。 ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值