kygoal的博客

2 Greenplum 架构Pivotal Greenplum数据库引擎是一个专为管理大规模的分析数据仓库和商业智能工作负载的大规模并行处理（MPP）数据库服务器MPP（也称为不共享架构）是指具有两个或更多个处理器协作来执行任务，每个处理器都有自己的内存，操作系统和磁盘。Greenplum使用这种高性能系统架构来分发TB级数据仓库的负荷，并且可以使用所有的系统资源来并行处理查询。G

第 16 章推荐的监控和维护任务本节给出了监控和维护建议，用于确保Greenplum集群的高可用和一致性的性能。下面章节给出的表格给出了Greenplum数据库系统管理员可周期性执行的，以确保系统的所有部件都运行在最佳的活动。通过监控系统，你可以尽早的检测和诊断问题。维护活动，可用使得系统保持最新的状态并避免日益恶化的性能。例如，臃肿的系统表或者磁盘空间日益减少。在所有的集群上都执行所

第18章 管理角色和权限在Greenplum数据授权机制在数据库中存储了用于访问数据库对象的角色和权限，并使用SQL语句或命令行实用程序中授权。Greenplum的数据库管理采用角色来控制数据库访问权限。角色的概念是包含用户和组的概念。一个角色可以是数据库用户，一个组，或两者兼而有之。角色可以拥有数据库对象（例如表格），并可以在这些对象上为其他角色分配权限来控制访问的对象。角色可以是其它角

Chapter 19 Configuring IPsec forGreenplum Database本主题介绍如何为Greenplum的数据库集群配置Internet协议安全（IPsec）。•IPsec概述•安装Openswan•配置Openswan连接IPsec概述Internet协议安全（IPsec）是一种在IP网络层（OSI第3层）的身份验证协议和加密通信的套件。使用

第 20章  定义数据库对象本节涵盖了Greenplum的数据库以及如何创建和管理数据库对象的数据定义语言（DDL）。在Greenplum数据库中创建对象包括一些前期选择例如数据分布，存储选项，数据加载及其他Greenplum数据库特性，这些特性会影响到数据库的性能。了解这些选项，以及如何使用会帮助你做出正确的选择。大部分Greenplum的先进特定都在SQL CREATE DDL语句中扩

8        访问数据库本章主要介绍可用于连接到Greenplum的数据库，以及如何建立一个数据库会话的各种客户端工具。8.1       建立一个数据库会话用户可使用PostgreSQL的兼容的客户端程序，比如psql的连接到Greenplum数据库。用户和管理员始终连接到通过主节点来连接到Greenplum数据库;段无法接受的客户端连接。为了建立与Greenplum的数据库

第 27章 调查性能问题 本节提供了Greenplum数据系统识别和排除性能问题的指导方针。本主题列出您可以采取以帮助确定性能问题的原因步骤。如果问题影响一个特定的工作负载或查询，你可以专注于调整特定的工作负载。如果性能问题是全系统的，那么硬件问题，系统故障或资源争用可能是原因。检查系统状态使用gpstate实用程序来确定发生故障的部分。一个Greenplum数据引擎系统会产生性能

第 21章 管理数据本节提供有关处理数据和Greenplum数据并发访问的信息。本主题包括以下子主题：•                 Greenplum中的并发控制•                插入数据•                更新数据•                删除数据•                事务•                Vac

24  查询数据本主题提供有关在Greenplum的数据库使用SQL的信息。你进入所谓的查询中使用PSQI交互式SQL客户端和其他客户端工具的数据库查看，更改和分析数据的SQL语句。•                关于Greenplum的查询处理•                关于 Pivotal Query Optimizer•                定义查询

第24章定义数据库性能管理系统的性能包括测量性能，识别性能问题的原因，并应用提供给您解决问题的工具和技术。Greenplum的测量基于在该数据库管理系统（DBMS）提供信息请求者率数据库的性能。 了解性能因素有几个关键性能因素影响数据库的性能。了解这些因素，有助于识别性能的机会和避免的问题：•系统资源•工作量•吞吐量•竞争•优化系统资源数据库性能在很大程

Greenplum 数据库服务器软件是一个高级全功能的开源数据仓库管理软件。它提供对PB级数据的强大和高效的分析功能。特别是在大数据分析这一块，Greenplum数据库配备了世界上最先进的基于计算成本的查询优化器，以实现对大数据较高查询和分析性能。 本文档是译者在使用Greenplum的过程中，基于Greenplum 4.3版本的官方文档进行翻译，该书与官方文档不等价。本书中涉及的内容未必适用其他

第 25章性能问题常见原因本节介绍常见的性能问题，这些问题可能​​的解决方案的故障排除过程。标识硬件和段故障Greenplum的数据库的性能取决于它所运行的硬件和IT基础设施。 Greenplum的数据库是由多台服务器（主机）为一体的综合系统（阵列）一起行动;在诊断性能问题的第一步，要确保所有Greenplum数据段是否在线。 Greenplum数据引擎的表现会像在阵列中最慢的主机一样

第 15 章日常系统维护为了保持高效运行的Greenplum数据系统中，数据库必须定期清除过期数据和表统计信息必须进行更新，以便查询优化器的准确信息。和其他的数据库软件一样，GPDB需要一些定期的维护任务以达到最佳性能。这里讨论的任务是必要的，他们是可重复的，所以可以使用标准的UNIX工具如cron脚本来调度。不过，设置合适的脚本以及确保它们成功的执行是数据库管理员的责任。日常 Vac

26  资源队列工作负载管理使用Greenplum的工作负载管理的优先次序，并根据业务需求分配资源来查询，并防止查询时资源不可用开始。本节将介绍Greenplum数据引擎的工作负载管理，并说明如何使用资源队列管理资源。使用资源的队列中，可用的存储器和CPU资源可以被分配给不同类型的的Greenplum的系统上执行查询。可以限制并发查询的数量，所使用的内存来执行查询的数量，并专门用于处理查询

1        使用Gptransfer迁移数据本主题介绍了如何使用gptransfer实用程序的数据库之间传输数据。该gptransfer迁移实用程序Greenplum数据和元数据从一个Greenplum的数据库中的数据转移到另一个数据库Greenplum的，让你迁移数据库，或者只是选定表的全部内容，到另一个数据库。源和目标的数据库可以是在相同或不同的群集。数据并行在所有细分转让，使用

3 关于 Greenplum中的并发控制Greenplum的数据库使用PostgreSQL的多版本并发控制（MVCC）模型来管理堆表的并发事务。数据库管理系统的并发控制不但能保证并发查询的执行并获得正确的结果，同时还能确保数据库的完整性。传统的数据库使用两阶段锁定协议，以防止交易的修改已被另一个并发的交易读取，并防止任何并发事务读取或写入另一个事务已经更新的数据。事务间的协调需要在数据库中

4 关于管理和监控工具Greenplum提供的标准命令行实用程序，用于执行常规监测与管理任务。Greenplum的命令行实用程序位于$GPHOME/bin目录，这些命令只能在master上执行。Greenplum提供了实用程序用以执行如下的任务:•                在阵列上安装Greenplum数据库引擎•                初始化Greenp

5 并行数据加载本章简述Greenplum的数据加载特性。         在一个大规模的，TB级的数据仓库上，大量的数据必须在一个较短的维护窗口中加载。Greenplum支持快速的、并行数据加载和外部表功能。管理员可以选择单行错误隔离模式的外部表以便将错误的数据过滤到一个单独的表中，同时继续加载正确的格式化的数据行。管理员也可以通过设定加载选项的阈值，以便控制不正确格式化行数导致的G

本章是在Greenplum数据ANALYZE命令收集的统计数据的概述。统计是描述存储在数据库中的数据的元数据。查询优化程序需要用最新的统计数据来选择查询的最佳执行计划。例如，如果查询联接两个表，其中一个必须被广播到所有段，优化器可以选择这两个表中较小的表以减少网络流量。优化程序使用的统计计算和ANALYZE命令来保存结果到系统目录中。有三种方式开始分析操作：•             

在Greenplum数据引擎数据库管理系统，数据库服务器实例（主机和所有段）启动或以这样的方式，他们可以作为一个统一的数据库管理系统一起工作的所有系统的主机停止。因为一个Greenplum数据系统跨越许多机器分布，用于启动和停止一Greenplum数据系统中的过程比用于启动和停止一普通的PostgreSQL数据库管理系统的处理不同。使用gpstart和gpstop实用程序分别启动和停止Gr

1 About This Guide本指南描述的Greenplum数据库系统和数据库管理任务。该指南包括五个部分：•      Greenplum的数据库概念，介绍Greenplum数据引擎的架构和组件。它介绍了管理主题，如镜像，并行数据加载和Greenplum的管理和监控工具。•      管理Greenplum系统，包含了日常Greenplum的系统管理任务的信息。主题包括启动

10  配置Greenplum数据库服务器配置参数影响Greenplum数据的行为。他们是PostgreSQL的“Grand Unified Configuration”系统的一部分，所以它们有时被称为“GUCs”。大多数Greenplum数据服务器的配置参数的相同PostgreSQL的配置参数，但也有一些Greenplum的特异性。10.1    关于Greenplum的主节点和本地参数

11  启用高可用特性容错和Greenplum数据的高可用性功能可配置。有关用于启用高可用性的实用程序的信息，请参阅Greenplum的数据库实用程序指南。11.1    关于GPDB的高可用一个Greenplum的数据库集群可以制成通过提供容错的硬件平台，通过支持Greenplum数据的高可用性功能高可用性，并通过执行定期监测及操作规程维修，确保所有系统组件的运行状况。无

1        备份和恢复数据库本主题介绍如何使用Greenplum的备份和恢复功能。定期执行备份，确保您可以恢复你的数据，或者数据损坏或系统故障发生重建Greenplum的数据库系统。您还可以使用备份将数据迁移从一个Greenplum数据系统到另一个。 1.1       备份和恢复概述With non-parallel backup and restore operati

1        扩展一个Greenplum System为了扩展性能和存储容量，通过将主机添加到阵列扩展Greenplum的系统。数据仓库的数据因为额外的数据收集和保留期现有数据的增加而导致其容量随时间增长而增长。有时，有必要替身单一的数据仓库容量以便将不同的数据仓库合并到一个单一的数据仓库。可能也需要额外的计算能力（CPU），以适应新添加的分析项目。虽然在一个系统刚初始化时就提供了足够

在Greenplum中，默认的表空间只有两个，分别是pg_default和pg_global，这两个表空间都放在了gp_system下。为了更有效的管理数据，需要对表进行管理，在oracle中有表空间的概念，在Greenplum中，表空间和其类似。下面介绍如何创建一个新的表空间。1、为每个表空间创建系统目录在master和所有的segment上都要创建。MASTER:/home/gpa