GaussDB 企业版轻量化部署探索

最新推荐文章于 2025-06-08 22:18:42 发布
最新推荐文章于 2025-06-08 22:18:42 发布
阅读量2.4k 收藏 36
点赞数 27
CC 4.0 BY-SA版权
分类专栏： GaussDB经验总结 文章标签： gaussdb 深度学习 人工智能 数据库 华为云
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/GaussDB/article/details/144527407

华为高斯数据库（GaussDB）是目前国产数据库中综合实力比较靠前的数据库之一。高斯数据库有单机开源版openGauss和企业版（包括集中式和分布式）。本文主要分享GaussDB企业版在普通服务器上部署的过程和原理简介。初次接触，困难较多。个人观点，仅供参考。如有不当，欢迎留言。

部署准备

企业版软件下载路径

华为官网产品非常丰富，包罗万象，数据库只是其中一款产品。加上还有华为云网站和相关产品，导致搜索GaussDB产品，很难找到正确的地址。这里就直接发地址信息如下：

https://support.huawei.com/carrier/navi?coltype=software#col=software&path=PBI1-253383977/PBI1-23710112/PBI1-23710137/PBI1-251517148

打开这个地址时会要求先登录华为support网站，需要注册一个账号。然后普通的账户没有权限下载，需要升级为“合作方”账户。登录后，网站上方会有“账户升级”入口。需要有华为商务团队引导。

打开网站后页面如下：

图片

     这些版本是 GaussDB 企业版私有云部署的版本，是基于 PG 内核修改的那个版本（另外还有 GaussDB DWS 版本以后有机会再看）。我是测试就选择推荐的最新版本。点进去后，页面如下：

图片

      每个版本还分两个类型：轻量化和HCS。这也是容易疑惑的地方。有些概念参考网友解释记录如下：

  • HC(Huawei Cloud):指华为公有云，使用特点是用华为的机房以及华为的运维服务。

  • HCS(Huawei Cloud Stack)：指华为私有云技术栈（云底座），使用特点是客户的机房以及华为的技术栈以及华为的运维服务。

GaussDB 企业版支持在HCS上部署，也支持独立部署（不依赖云底座），后者就叫轻量化部署。轻量化部署类型的软件看起来非常多，主要是这里面含有了 GaussDB的运维管控平台TPOPS(OLTP OPS的简称）、数据迁移产品DRS。这些软件都要下载，下载使用华为云专用下载客户端ICS。

图片

ICS

从官网下载的软件包非常多，都是有用的。很多软件包都是压缩包文件，里面还有更详细的软件包，软件包虽然非常多，但是在下面的部署文档里都有详细说明。

除了软件还要下载对应版本的 GaussDB轻量化部署文档：

图片

后面的部署过程完全参考这个文档。这个文档的质量非常高。

部署方案

GaussDB的部署方案也非常丰富，根据客户需求来。这里包括 TPOPS和客户GaussDB的部署方案。简单来说主要考虑点就是客户机房特点和高可用容灾需求。严格来说TPOPS的部署方案跟它要管理的GaussDB的部署方案也有一定关系。本文暂且只讨论TPOPS的部署方案。

运维平台 TPOPS的部署方案支持单机房部署和同城双机房部署。

  • 单机房一主两备部署。

图片

推测如果是测试，一台物理机也够了，不要高可用能力。生产环境肯定要三台服务器才有完整的高可用能力。之所以是三台的原因估计是因为TPOPS的元数据库也是GaussDB，其高可用能力需要三副本（一主两备）才行。

  • 同城双机房部署

图片

这个部署架构下依然是三台服务器，区别是有一台服务器部署到同城备机房了。这种架构下如果主机房故障了，元数据库的高可用怎么实现。推测 GaussDB 的主备复制有两种技术：一是类似 Paxos一致性协议，一种是Quorum复制协议。

这次测试我只有一台虚拟机用于TPOPS部署。

部署资源要求

官方文档要求部署服务器资源是8C64G,能管控 60 个主机（节点）。这个要求对于普通玩家来说太高了，我勉强凑足 60G 内存虚拟机先试一下，后期再看怎么精简部署资源要求。

要精简资源就得先了解部署对资源的使用特点。TPOPS 是由多个产品组件协同工作。为了方便部署，这些组件除了元数据库外都使用Docker容器技术部署。容器内应用的相关目录映射到宿主机上。在部署过程中有下面几个目录比较特别。

  • /data/docker-service : 安装工具包解压缩的推荐目录。部署的运行命令是一个Shell脚本：appctl.sh。

  • /opt/cloud:TPOPS主程序文件公共目录。

  • /opt/cloud/logs：TPOPS各个服务组件的日志目录。用于分析主程序安装日志以及各个服务组件安装日志。

    图片

  • /opt/GaussDB: TPOPS元数据库软件和数据目录。为了性能最大化，这个目录建议使用独立的文件系统。

    图片

  • /opt/sftphome：sftp软件服务工作目录，TPOPS会使用sftp在管理平台和数据库节点之间传输软件包。

    图片

  • /opt/docker：docker服务工作和数据存储目录。不过大部分服务组件都有做卷映射，实际数据并不在这个路径下。

  • /opt/influxdb：TPOPS存储监控告警的数据库（influxdb）工作目录。

    图片

  • /opt/backup：备份用的路径，暂时没有用到。

DRS是用于数据迁移的，暂时不用部署。相关目录就不提了。

部署账户

TPOPS 的部署过程中会在操作系统里创建相关账户。这里信息复制自部署文档。需要提前确保账户名没有被使用。

账户名 说明

root

操作系统权限用户。登录TPOPS管理节点时需要输入密码。root密码仅支持数字、特殊字符-_+@以及字母。

service

启动微服务进程的用户，可在安装配置文件user_edit_file.conf中指定用户service_group_id、service_user_id，默认值为1010。若已被占用，可修改为其他值。配置文件默认路径/data/docker-service/config/user_edit_file.conf。

dbadmin

元数据库使用的操作系统用户。

sftpservice

SFTP服务用户。

influxdb

时序数据库InfluxDB使用的操作系统用户。

操作系统设置

   GaussDB的部署对主机也有设置要求，下面只是简述，要求如下：

  • 时区要求是 UTC 时区。kylin 系统默认安装的时区是 CST,+0800需要修改掉。

  • 时间源和同步设置。推荐用 chrony 同步时间。

  • 配置 yum 源。

  • 配置 zypper 源。

  • 关闭防火墙。

正式部署

上传软件包

默认部署时工作目录使用/data/。

  • 解压缩安装包DBS-docker-service_*_all.tar.gz 到目录 /data。

tar -zxvf DBS-docker-service_24.1.31.2024052916541361_all.tar.gz -C /data

  • 上传以下安装包到目录 /data/docker-service/pkgs 下。

软件包名 软件包说明

DBS-MetaDB_Kylin_Centralized_*.tar.gz

元数据库内核包

DBS-GaussDB-Server_.tar.gz DBS-Platform-Server.tar.gz DBS-GaussDBConsole-Server*_.tar.gz

微服务包

GaussDB_OS_PATCH_.zip DBS-tools__all.tar.gz

实例安装包

编辑配置文件

配置文件里会有部署的服务器信息。

cd /data/docker-service/config
vi user_edit_file.conf

[user_edit]
ssh_port = 22
gauss_path = /opt/gaussdb # 元数据库安装目录（不能在/home目录下）
node1_ip = 10.0.0.68 # 节点1本机IP地址（执行节点IP地址）
influxdb_install_ip1 = 10.0.0.68 # InfluxDB安装节点1
sftp_install_ip1 = 10.0.0.68 # SFTP安装节点1
main_path = /opt/cloud # 微服务运行目录， 目录可自定义，仅支持自定义第一级目录，二级目录cloud不允
许修改
node1_ip2 = 10.0.0.68  # 节点1可以和GaussDB实例地址通信的IP地址（执行节点可以和GaussDB实例通信的
IP地址，要求可以和GaussDB实例SSH通以及Ping通）
log_path = /opt/cloud/logs  # 日志目录， 目录可自定义，仅支持自定义第一级目录，二级目录cloud及之后目
录不允许修改
sftp_path = /opt/sftphome  # SFTP数据目录， 目录可自定义，仅支持自定义第一级目录，二级目录sftphome
不允许修改
influx_path = /opt/influxdb  # InfluxDB数据目录，需要保证influxDB_install_ip1以及influxDB_install_ip2节点
InfluxDB的父目录都有InfluxDB用户的可执行权限(如遍历父目录，对目录执行chmod a+x /directory_1/
directory_2)，目录可自定义，仅支持自定义第一级目录，二级目录influxdb目录不允许修改
docker_path = /opt/docker  # Docker数据目录， 目录可自定义，仅支持自定义第一级目录，二级目录docker
不允许修改，如果用户环境已安装Docker，则以用户配置为准，该项配置不生效。
backup_path = /opt/backup  # 备份数据目录， 目录可自定义，仅支持自定义第一级目录，二级目录backup不
允许修改
service_group_id = 1010 # Service用户ID（需未被使用）
service_user_id = 1010   # Service用户组ID（需未被使用）
uninstall_all = yes  # 卸载时需将参数值配置成yes,默认为no
use_cgroup =&nb
最低0.47元/天 解锁文章

200万优质内容无限畅学
GaussDB技术解读——GaussDB架构介绍（一）
Gauss松鼠会
06-06 4703
从本期开始，Gauss松鼠会将陆续推出GaussDB技术解读系列文章，带您了解GaussDB的架构及关键技术原理。本篇将从GaussDB 关键架构目标、GaussDB分布式架构、数据计算路由层（Coordinator）关键技术方案等三方面对GaussDB架构进行介绍。
GaussDB 企业版轻量化部署探索（二）
Gauss松鼠会
12-18 1966
国产分布式数据库的规模往往很大，所以需要借助自动化运维平台来运维。自动化运维平台本质上是将运维流程标准化、自动化。好的自动化运维平台设计上架构清晰、扩展性好、运维便利性高。大厂出口的自动化运维平台都久经考验，可学习研究借鉴的价值很高。GaussDB数据库体系庞大，架构复杂，学习和运维难度也非同一般，所以也很依赖自动化运维平台TPOPS。
中小企业买不起专业BI？衡石HENGSHI SENSE的轻量化部署指南
最新发布
zandy1011的博客
06-08 770
在数字化浪潮中，中小企业正面临两难困境：一边是激烈市场竞争对数据驱动决策的迫切需求，另一边是专业BI工具高昂的采购成本与复杂的部署门槛。某制造企业IT负责人的吐槽颇具代表性：“传统BI工具动辄百万级授权费，加上服务器、运维团队开支，一年投入够买辆宝马5系。”这种矛盾催生了新的解决方案——衡石科技HENGSHI SENSE通过轻量化部署模式，让中小企业以“五菱宏光”的成本获得“宝马级”的数据分析能力。
2.GaussDB分布式数据库部署
weixin_43346403的博客
08-29 3924
这里需要注意，配置文件尽量不要手工编辑，容易出错。在GaussDB,OceanBase，TiDB等分布式数据库部署时，配置文件都是严格按照对齐方式的，手工编辑的会出现多次失败，直到配置信息正确。执行如上两个命令能够有效方式，在部署结束后集群启动失败，600s超时的问题。集中式部署有集中式部署的包，分布式有分布式部署的包。（2）分布式数据库的部署，尽量使用数据库自带的配置文件进行修改，手工修改容易出错，导致部署失败。配置信息看起来没有问题，接下来我们部署，看看手工配置的的信息能不能部署成功。
数据库系列之GaussDB数据库高可用部署方案
牧羊人的方向
08-20 2472
GaussDB数据库主备架构的基本组件，以及基于华为云底座和轻量化部署TPOPS两种方式的典型高可用部署场景介绍。
数据库应用：Linux 部署 GaussDB
cronaldo91的博客
03-18 5623
观察网络变化 （在TCP四次挥手时，主动关闭端发送了ACK包之后，进入TIME_WAIT状态，等待最多MSL时间，让被动关闭端收到ACK包。修改后：（572-573注释 或 -1改为 -2）修改后：（572-573注释 或 -1改为 -2）（2）安装依赖包 （root用户）（8）查看库文件 （root用户）再次查看（需要reboot重启）观察网络变化 （30秒-1分钟）查看系统所有表 （一共86行）查看管理员表（一共86行）（10）创建与删除用户。（3）创建表时指定外键。（11）查看用户信息。
Gaussdb 企业版的组件-主从模式
Oliviahome的博客
09-18 542
【代码】Gaussdb 企业版的组件-主从模式。
GaussDB200 部署
heqingcool的博客
06-10 1164
前言 GaussDB安装需要使用fi manager，目前支持的centos最高版本为7.4，不能选择高于该版本。推荐配置内存16G，cpu核心数8C，硬盘300G。 软件准备 解压gaussdb.tar包，并解压至/opt目录下 上传操作系统镜像CentOS-7-x86_64-DVD-1810.iso 前置动作 #修改主机名 hostnamectl set-hostname yourhostname #修改hosts文件，增加yourip yourhostname yourip yourhostname
gaussDB5.0 企业版安装包 Linux版本
08-27
gaussDB 5.0 企业版是一款基于Linux平台的高性能、高可用性的分布式数据库系统。这款产品由华为公司开发，旨在为大型企业和组织提供强大的数据存储和处理能力，尤其适合处理大规模的数据并发操作。在本安装包中，...
GaussDB软件下载，华为高斯数据库安装软件
09-26
作为一款企业级数据库解决方案，GaussDB支持多种数据模型，包括行存储、列存储等，并且具备强大的容灾能力，能够保证数据的高可用性和业务连续性。 从给定的压缩包文件名称列表中，我们可以分析出以下信息： 首先...
GaussDB企业级AI-Native分布式数据库
Oliviahome的博客
10-21 183
GaussDB采用MPP(Massive Parallel Processing)架构，支持行存储与列存储，提供PB(Petabyte，2的50次方字节)级别数据量的处理能力。华为GaussDB将AI能力植入到数据库内核的架构和算法中，为用户提供更高性能、更高可用、更多算力支持的分布式数据库。GaussDB 采用 MPP(Massive Parallel Processing)架构，支持行存储与列存储，提供 PB(Petabyte，2 的 50 次方字节)级别数据量的处理能力。
GaussDB_200_6.5.1部署安装
刘元林的博客
05-08 3864
# 连接gaussdb（如果不加载${BIGDATA_HOME}/mppdb/.mppdbgs_profile ，执行就会报下面的错误）web操作创建集群，具体操作参考：https://www.jianshu.com/p/ffb47ab1d0f6。## omm用户执行，加载环境变量（此时再次查看数据库版本就不同了，是kernel version）# 创建用户和数据库，用户密码必须包含三种字符，否则会报错；## omm用户执行，查看数据库版本。修改install安装配置文件。GaussDB200测试。
GaussDB_100_1.0.1部署安装
刘元林的博客
05-08 1956
如果ENABLE_SYSDBA_LOGIN=TRUE，可以免密登录：zsql / as sysdba。zsql sys/Changeme_123@你的IP:1888。# 安装成功后，会自动注册环境变量。# 安装成功后，会自动启动数据库。如下提示，则表示安装成功。
1.GaussDB数据库部署之-环境准备
weixin_43346403的博客
08-28 7234
8)CD/DVD 设置到操作系统文件的位置:Kylin-Server-10-SP2-x86-Release-Build09-20210524.iso。管理IP :192.168.1.52 主机名称:gaussdb01 ,第一块网卡设置为桥接网络。7)新增2块网卡.GaussDB分布式安装需要最少三块网卡(管理IP,DATAIP,VIP)。不同的选项,安装的包个数不一样。安装位置,操作系统安装在80G的盘里，100G的盘用于数据库的安装。本次安装GaussDB的实验,我们使用麒麟的这个软件版本。
GaussDB分布式测试环境搭建
t15541185212的博客
06-08 2086
GaussDB分布式本地环境搭建，用于学习GaussDB数据库运维技术
GaussDB T分布式集群安装部署
jnrjian的博客
11-14 1698
GaussDB T分布式集群安装部署
华为GaussDB数据库（单机版）在ARM环境下的安装指南
热门推荐
非法小恋
09-26 13万+
GaussDB在ARM环境下安装
GaussDB 学习实战指南：从部署到高并发优化的全流程解析
weixin_49306340的博客
02-26 951
GaussDB 的实战能力需要在复杂场景中不断锤炼。通过本文的分布式架构设计、性能调优与云原生实践，相信你已具备解决企业级数据库难题的能力。持续探索，让数据驱动业务创新！欢迎在评论区分享你的 GaussDB 实战经验或技术疑问！共同探讨，攻克技术难关！
openGaussdb5.0单点企业版部署_Centos7_x86
qq961573863的博客
01-28 2254
openGauss是一款开源关系型数据库管理系统，采用木兰宽松许可证v2发行。openGauss内核深度融合华为在数据库领域多年的经验，结合企业级场景需求，持续构建竞争力特性。openGauss社区版本分为长期支持版本和创新版本：· 长期支持版本 (LTS) ——规模上线使用，发布间隔周期为1年，提供3年社区支持。· 社区创新版本 (Preview) ——联创测试使用，发布间隔周期为1年，提供6个月社区支持。openGauss支持单机部署和单机HA部署两种部署方式。
Linux下安装GaussDB5.0企业版的完整指南
gaussDB5.0企业版是华为公司推出的一款高性能的企业级数据库产品，适用于各种复杂、高并发及大数据量的业务场景。Linux版本的安装包为openGauss-5.0.0-CentOS-64bit-all.tar，该文件适用于64位的CentOS系统。安装前...
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Gauss松鼠会

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值