pengrander-优快云博客

原创 GBASE南大通用8a数据库产品核心组件介绍

GCluster 会接受 SQL、进行解析优化，生成分布式执行计划，选取可操作的节点执行分布式调度，并将结果反馈给业务端。GCMonit：用于实时监测GCluster和GNode核心组件的运行状态, 一旦发现某个服务程序的进程状态发生变化，就根据配置文件中的内容来执行相应的服务启动命令，从而保证服务组件正常运行。GCware_Monit:用于实时监测 GCware 组件的运行状态, 一旦发现服务进程状态发生变化，就根据配置文件中的内容来执行相应的服务启动命令，从而保证服务组件正常运行。

2023-12-20 16:23:07 616 1

原创 GBase南大通用8a数据库和hadoop生态可以进行数据交互吗

具体来说，GBase 8a MPP Cluster支持与Hadoop平台进行数据交互，具备从Hadoop平台进行数据导入和向Hadoop平台进行数据导出的能力。数据导入：GBase南大通用8a数据库可以通过与Hadoop的连接，从Hadoop平台导入数据。这意味着数据可以从Hadoop加载到GBase，也可以从GBase导出到Hadoop。总的来说，GBase南大通用8a数据库和Hadoop生态之间的数据交互功能使得这两个系统可以相互补充，满足不同场景下的数据处理需求。

2023-12-20 15:11:13 624 1

原创如何使用GBase南大通用8a数据库进行数据迁移

需要注意的是，具体的步骤可能会因使用的工具和数据源的不同而有所差异。因此，在开始数据迁移之前，建议仔细阅读相关文档和教程，并了解您的工具和数据源的具体要求和限制。总之，使用GBase南大通用8a数据库进行数据迁移需要仔细规划和准备，选择合适的工具和命令，并验证数据的完整性和准确性。确定迁移需求：首先，您需要明确数据迁移的需求，包括迁移的目的、目标数据库、迁移的数据量、迁移的时间要求等。导出源数据：使用源数据库的导出工具或命令，将需要迁移的数据导出为相应的格式（如CSV、XML等）。

2023-12-20 15:10:41 804 1

原创如何使用GBase南大通用8a数据库进行数据加载

加载数据：使用适当的加载工具或命令，将数据从数据源加载到GBase南大通用8a数据库中。需要注意的是，具体的步骤可能会因使用的工具和数据源的不同而有所差异。因此，在开始数据加载之前，建议仔细阅读相关文档和教程，并了解您的工具和数据源的具体要求和限制。验证数据：在数据加载完成后，您应该验证数据的完整性和准确性。建立连接：使用适当的数据库连接工具或驱动程序，连接到GBase南大通用8a数据库。准备数据源：首先，您需要准备要加载到GBase南大通用8a数据库中的数据。

2023-12-20 15:10:07 571 1

原创 GBASE南大通用8a数据库优势在哪里

广泛的应用场景：GBASE南大通用8a数据库适用于多个领域和行业，如金融、电信、政府、医疗等，满足各个数据密集型行业日益增大的数据分析、数据挖掘、数据备份和即席查询等需求。综上所述，GBASE南大通用8a数据库具有高性能、强扩展性、多样化的平台选择、完善的技术支持和广泛的应用场景等优势，能够满足不同用户的需求，提供全面的技术支持和保障。完善的技术支持：南大通用提供完善的技术支持和服务，包括安装、配置、调试、优化等方面，为用户提供全面的技术支持和保障。

2023-12-19 16:32:00 688

原创 GBASE南大通用8a数据库精选案例

该项目采用全栈国产化生态，选用南大通用分布式逻辑数据仓库GBase 8a作为数据库底座，满足该行监管报送等需求的同时，助力该行完成此次信创国产化的重要实践。该行积极贯彻新发展理念，服务构建新发展格局，加快信创国产化转型步伐，增强服务实体经济能力，为满足新阶段的业务发展路线，开展新监管统计数据报送系统建设工作，本次项目建设数据库选型采用南大通分布式逻辑数据仓库GBase 8a作为数据库底座。这个案例展示了GBASE南大通用8a数据库在金融行业的应用，并实现了信创国产化的重要实践。

2023-12-19 16:31:03 468

原创 GBASE南大通用8a数据库性能调优实践

查询优化：对查询语句进行优化，避免使用低效的查询方式，如避免使用子查询、使用连接代替子查询等。索引优化：根据查询需求和数据特点，合理建立索引，避免全表扫描，提高查询效率。总之，GBASE南大通用8a数据库的性能调优需要综合考虑硬件、软件、查询等多个方面，通过不断调整和优化，提高数据库的性能和稳定性。数据库参数调整：根据实际业务需求和数据量，调整数据库参数，如缓冲区大小、连接数等，以提高数据库性能。数据库维护：定期对数据库进行维护，包括数据备份、日志清理、碎片整理等，确保数据库的稳定性和性能。

2023-12-19 16:30:19 492 1

原创 GBASE南大通用8a数据库安装手顺

创建目录并解压：使用命令mkdir /opt/Gbase-8a来创建目录，然后使用命令tar -xvf /opt/pkg/GBase8a-NoLicense-Free-8.6.2_build43-R7-redhat7.3-x86_64.tar.bz2 -C /opt/Gbase-8a/来解压安装包。其中，p为分片数，d为副本数。切换到 DBA 用户，并修改安装配置文件参数：使用命令vim /opt/gcinstall/demo.options来编辑配置文件，并进行相应的参数修改。

2023-12-19 16:29:36 494

原创 GBASE南大通用8a数据库核心技术介绍

联邦架构集群部署：基于列存储的完全并行的MPP+Shared Nothing的联邦架构，采用多活Coordinator（Master）节点、数据节点的两级部署结构，避免了单点性能瓶颈和单点故障，对外提供单一的访问地址。虚拟集群及镜像：通过虚拟集群技术，实现多个物理节点的逻辑统一，提高系统的可用性和可扩展性。完善的资源管理：通过资源调度和分配机制，实现资源的充分利用和动态调整，提高系统的性能和稳定性。高效存储结构：采用列存储技术，将数据按列进行存储，只读取需要的列，避免了全表扫描的开销。

2023-12-19 16:28:44 470

原创 GBase 8a集群之sql注释

GBase 8a MPP Cluster支持三种注释风格：（1）“#”：单行注释；（2）“--”：单行注释，以“--”开头到该行结束为注释内容。注意“--”（引导号）注释要求第二个引导号后至少跟着一个空格；（3）“/*注释内容*/”：这种注释支持注释内容为一行或者连续的多行，还支持注释内容在行中间。/**/这个封闭的序列不一定在同一行表示，因此该语法允许多行注释。注意：“--”（引导号）注释风格要求第二个引导号后至少跟着一个空格。这个语法和标准的 SQL 注释风格略有不同。...

2022-05-30 16:39:04 991

原创 GBase 8a集群之智能索引

智能索引是一种粗粒度索引，每65536行数据生成一个数据包，每个数据包在数据入库时自动建立智能索引，包含过滤信息和统计信息，在数据查询时不需要解包就能得到统计值，可进一步降低I/O，对复杂查询的优化效果明显。表中的智能索引自动创建，不需用户手工建立和维护；智能索引本身占空间很少，扩展性很好，建立智能索引后存储空间几乎无膨胀；智能索引建立的速度快，后面的数据包建立智能索引的速度不会受到前面数据包的影响。与传统数据库索引技术相比，智能索引建立在数据包上（粗粒度索引），并且每个字段均自动建有索引，而传

2022-04-29 10:40:19 1314

原创 GBase 8a集群性能优化之group by 多列hash重分布

GBase 8a性能优化

2022-03-28 14:37:58 1053

原创 GBase 8a集群性能优化之count优化

开启参数gcluster_count_optimize对单表进行count(*)时不产生中间结果表，gcluster直接计算结果值。参数0时，按照产生中间表的方式执行，参数1时，gcluster直接计算count值。优化点：count(*)时原来的策略是先在发起节点上的gnode上创建一个临时的汇总表，把各个节点的执行结果汇总到该临时的汇总表上，然后对该临时的汇总表再做sum汇总，汇总完成后再删除临时汇总表。当有高并发时，频繁的创建和删除临时的汇总表将降低性能，现在修改为不创建临时的汇总表，把.

2022-02-22 17:04:44 337

原创 GBase 8a集群性能优化之延迟group by

如果SQL语句中有group by并且group by列中不包含hash分布列时，集群计划默认使用两阶段group by，即先在各个节点上做group by，做hash重分布，然后再做一次group by。如果两阶段group by的第一阶段无法有效缩减结果集，即group by后结果集变化不大，在结果集数据量仍然很大的情况下，第一遍的group by就基本上相当于白做了。比如查询，select count(*) from tab group by id2，id2非表tab的hash分布列，..

2022-01-19 10:21:19 358

原创 gbase8aV86集群进行数据分片手动同步

对V86集群自动恢复无法完成需要人工干预场景，进行数据分片手动全同步需要手动全同步的情况，主要分为如下两种：1、集群中表的某一个分片因某种原因自动恢复无法完成，此时使用正常的分片去覆盖异常的分片进行手动同步。2、集群中表的某一个分片因某种原因主备片同时不可用（损坏或者同时都记录event），此时主备片的数据都是不可信的，只能人工从主备分片中选择一个分片作为有效分片进行手动同步。场景举例三节点集群，集群IP：192.168.92.129，192.168.92.130，192.168.92.

2021-12-29 09:55:16 1563

pengrander的博客