Greenplum入门介绍

CentOS 安装 Greenplum 6.18.2 CentOS 安装 Greenplum 6.18.2 环境准备 硬件要求: 最低CPU:任何x86_64兼容的CPU 最小内存:16GB 磁盘要求: 1.单个主机150M用于Greenplum安装 2.每个Segment实例大约300M元数据 网络要求:10千兆网络,多个接口进行NIC绑定,greenplum支持ipv6 和ipv4 文件系统:只支持XFS 注:本次实验采用虚拟机安装,不是搭建生产环境,因此配置较低。本次安装实际配置如下: 内存:4GB... 阅读详情

Greenplum数据库是在postgreSQL开发出来的,基于MPP(massively parallel processing)和shared-Nothing架构(Oracle RAC是shared everything架构)。

主要用在数据仓库中,做大规模数据和复杂的查询功能所涉及。

与现有的数据仓库解决方案(Oracle、IBM、Microsoft、Sybase和Teradata)相比有他自己的特点:

1.速度更快 2.支持数据量更大,扩展性较好 3.价格更低

缺点:

1、对局域网带宽要求很高,一般都是千兆交换机。
2、不支持在线扩容,扩容的话至少要增加2台以上的机器。后若不是成2倍扩展,需要重新平均分布所有数据。


(Greenplum的架构图)

Master节点主要作用:

接收客户端的连接、处理SQL命令、调配各segment节点间工作负载、协调各segment节点返回结果并把最终的结果返回给用户。

所有数据库的元数据都保存在Master节点,并不保存用户数据。各segment数据要做交换的是不经过master的。

Segment节点主要作用:

数据存储、 处理大多数的查询请求。

表和索引被分布在GP数据库的可用segment节点中,每个segment包含部分且唯一的数据。用户不能直接和segment节点做交互,都是要先通过master节点。

Interconnect网络连接层作用:

负责各segment节点进程通信,使用标准的千兆交换机。

数据传输缺省使用UDP协议。使用UPD时,GP会做额外数据包校验和对未执行的也会做检查。故在可靠性上,基本和TCP上是等价的,在性能和扩展性上,却优于TCP。

使用TCP的话,GP有1000个segment的限制,UDP则没有。

《GreenPlum系列》GreenPlum初级教程-GreenPlum详细入门教程 01GreenPlum数据库介绍 02GreenPlum单节点安装 03GreenPlum系统管理 04GreenPlum数据类型 05GreenPlum语言DDL&DML&DQL 06GreenPlum函数 阅读详情

相关推荐

Greenplum学习指南:从入门到精通

本文全面介绍Greenplum分布式数据库的核心特性和应用实践。Greenplum基于PostgreSQL开发,采用MPP架构实现PB级数据的高效处理,具备并行查询、高可用性和灵活存储等特性。文章详细解析了其架构原理、安装配置流程、SQL使用技巧及性能优化方法,包括资源管理、查询优化和存储策略。同时探讨了扩容、高可用、混合负载等高级主题,展示了Greenplum在数据仓库和大数据分析领域的优势。通过系统学习,读者可掌握构建高效数据仓库的关键技术,满足企业实时分析需求。

guse1125的博客 662

Greenplum高并发数据库概览

GreenPlum DB(GPDB)是一个开源的高并发(MPP:massively parallel processing ) 数据处理平台,可用于海量数据分析,机器学习,AI场景,专为下一代数据仓库和大规模分析处理设计。初识;

企业实战系列集 ●●● https://ximenjianxue.blog.youkuaiyun.com 2084

理论+实例,带你入门Greenplum机器学习框架MADlib

本文由瀚高基础软件...

Greenplum中文社区 1256

GreenPlum入门

本文旨在小白入门。 我开始研究GP的动机是因为它在MPP和数仓方面的名声,另外,GP也是集团技术栈的一员。 1 GPDB简介 Pivotal Greenplum Database is a MPP (massively parallelprocessing) database built on open sourcePostgreSQL.The s...

weixin_33811539的博客 302

Greenplum-Spark Connector 介绍

1. 前序 Greenplum 是一款优秀的 mpp 数据库产品,官方推荐了几种将外部数据写入 Greenplum 方式,包含:通用的 Jdbc,gpload 以及 Pivotal Greenplum-Spark Connector 等。 Jdbc:Jdbc 方式,写大数据量会很慢。 gpload:适合写大数据量数据,能并行写入。但其缺点是需要安装客户端,包括 gpfdist等依赖,安装起来很麻烦。需要了解可以参考 gpload。 Greenplum-Spark Connector:基于 Spark并行处

Greenplum中文社区 3339

GreenPlum数据库介绍

一、GP数据库简介 GP(GreenPlum)是业界最快最高性价比的关系型分布式数据库,它在开源的PG(PostgreSql)的基础上采用MPP架构(Massive Parallel Processing,海量并行处理),具有强大的大规模数据分析任务处理能力。 GP作为大数据融合存储平台中众多数据库之一,与其他数据库系统和文件系统一起,为OceanMind提供完整的OceanStorage大数据融合存储解决方案。 二、GP的特点 海量存储 GreepPlum支持50PB(1PB=1024TB)级海量数据.

Champion-Dai 1万+

【活动预告】使用Rocky Linux和Greenplum的开源分析入门介绍

...

Greenplum中文社区 204

GreenPlum入门学习手册

无共享、大规模并行处理(massively parallel processing (MPP))的数据库软件产品GreenPlum;分布式数据仓库。

GreenPlum数据库笔记

在典型的Shared-Nothing中,每一个节点上所有的资源(CPU,内存,磁盘)都是独立的,每个节点都只有全部数据的一部分,也只能使用本节点的资源。在greenplum中,需要存储的数据在进入数据库时,将先进行数据分布的处理工作,将一个表中的数据平均分布到每个节点上,并为每个表指定一个分布列(distribute Column),之后便根据Hash来分布数据。Master本身不储存数据,所有数据拆分保存到每一个节点上,在指定分布键的时候,数据按照分布键的Hash值来分布数据,称为。

covon1024的博客 1918

Greenplum详细使用手册(新手必备)

Greenplum详细使用手册(新手必备手册),安装,卸载,初始化及集群维护监控管理。全网最全手册。

摩擦纳米发电机测试系统全解析:从硬件配置到软件控制

本文全面解析摩擦纳米发电机(TENG)测试系统,涵盖硬件配置、软件控制及系统集成。详细介绍NI USB-6003等采集卡的选择与使用,以及一体化控制软件的功能与优势,帮助研究人员高效评估纳米材料发电性能。系统支持自动测试与数据分析,显著提升测试效率与准确性。

weixin_28720767的博客 460

视频课程《小白快速入门greenplum》在csdn学院上线了

1.场景描述 视频课程《小白快速入门greenplum》在csdn学院上线了,有需要的朋友可以直接点击链接观看。 2. 课程内容 课程地址:https://edu.youkuaiyun.com/course/detail/27801?utm_source=xueyuanjuhe 课程目录: 目录 第一章 课程介绍 第二章 greenplum之背景介绍与下载 第三章 greenplum之系统架构与技术架构说明 ...

软件老王 1097

Node-Red系列教程——NodeRed通过OPC UA读取数据并写入mysql

NodeRed通opcua读取西门子数据并存入mysql

鲸鱼姐的专栏 1万+

《Greenplum企业应用实战》一导读

前 言 为什么写作本书 阿里巴巴是国内最早使用Greenplum作为数据仓库计算中心的公司。从2009年到2012年Greenplum都是阿里巴巴B2B最重要的数据计算中心,它替换掉了之前的Oracle RAC,有非常多的优点。 Greenplum的性能在数据量为TB级别时表现非常优秀,单机性能相比Hadoop要快好几倍。 Greenplum是基于Po...

weixin_34319640的博客 280

人工智能100问☞第5问:什么是AI三要素?

人工智能的核心三要素是​​数据、算法和算力​​,分别作为AI的“燃料”、“大脑”和“动力”,三者协同驱动智能系统的学习、推理与决策能力。

bjdx_001的博客 1991

Android SSL证书固定实战:原理、方案与避坑指南

SSL/TLS协议是保障网络通信安全的基石,其核心原理是通过非对称加密和数字证书实现身份认证与数据加密。在移动应用开发中,为了防止中间人攻击,证书固定技术应运而生,它通过将服务器证书或公钥的哈希值预置在应用内,强制校验服务器身份,从而大幅提升通信链路的安全性。这一技术对于金融、电商等高安全要求场景尤为重要。本文聚焦Android平台,深入解析SPKI固定、Network Security Configuration与OkHttp CertificatePinner等主流方案,并针对证书更新、调试兼容等常见痛

weixin_33935636的博客 402

GreenPlum快速入门实践

文章目录1. 表创建1.1 获取帮助1.2 指定分布键1.3 其它创建方式1.4 SELECT 查询结果展现顺序2. 分区表2.1 range分区2.2 list分区2.3 分区管理3. 数据加载3.1 Insert3.2 Copy3.3 外部表3.3.1 介绍3.3.2 实践示例3.3.3 可执行外部表3.3.4 可写外部表 数据导出3.4 gpload4. 拉链表实现5. 数据字典OID6. 集群维护 1. 表创建 1.1 获取帮助 -- 获取帮助 \h create table 1.2 指定分布键

飞虹的专栏 2204

Spring Boot入门(13):Mybatis-Plus之条件构造器使用手册:精通让你快速提高查询效率的技巧!

化繁为简,MP 中条件构造器的使用,极其详细.

**My Coding Family** 3万+

GreenPlum的学习心得和知识总结(三)|Greenplum数据库快速入门

Greenplum数据库快速入门

孤傲小二~阿沐的博客 7918

AXI总线详解完结篇

经过几个月的整理和发文,AXI总线详解系列正式迎来最终篇,内容基本涵盖了上一篇文章的全部内容。 所有文章的链接如下: 1、 AXI总线详解 2、AXI总线详解-总线和接口以及协议 3、AXI协议中的通道结构 4、AXI总线详解-AXI4读写操作时序及AXI4猝发地址及选择 5、AXI4交换机制 6、ZYNQ中DMA与AXI4总线-DMA简介 7、AXI总线详解-不同类型的DMA 8、AXI总线详解-DMA内部寄存器的读写方式 9、AXI总线详解-几种应用DMA的场合 10、Altera Scatter-G.

OpenFPGA的博客 5490

在 SAP 中,Primary Cost Element(初级成本要素)与Secondary Cost Element(次级成本要素)的核心区别、作用及业务含义可归纳如下

摘要:SAP中初级成本要素与次级成本要素的核心区别在于:初级要素必须关联FI模块的损益科目,直接影响财务报表,用于记录外部成本(如电费、薪酬);次级要素仅存在于CO模块,用于内部成本分配(如分摊、作业分配),不影响外部报表。初级要素是"外部成本入口",次级要素是"内部成本搬运工",二者共同实现成本的多维度追踪与管理。

金牌架构师 759

Greenplum介绍

一、Greenplum的发展历史 Greenplum的发展可以分为下面6个阶段: 图 1 Greenplum时间线 Postgres关系型数据库。Postgres是UC Berkeley开发的关系型数据库,现已更名为PostgreSQL。PostgerSQL官网介绍自己是最先进的数据库,有强大的SQL支持能力,扩展性好,并且支持空间扩展。通过空间数据引擎PostGIS的支持可以存储和操作

知道自己还有很多不知道的事 5万+

【YOLOv8改进[Conv]】使用OREPA助力V8更优秀

使用OREPA助力V8更优秀,降低训练成本,在不引入任何推理时间成本的情况下提高深度模型的性能。

静谧、淡雅 1917

GreenPlum介绍

是什么? GreenPlum是分布式数据库存储方案,而glusterfs是分布式文件存储方案。 可以在服务器运行无分享的大规模并行处理架构。 架构 1.总架构 包括master severs和segment severs master severs是 建立与客户端的连接和管理;SQL解析并形成执行命令,并传达给segment,和收集segment结果;不存储数据只存储字典。 segment是 业务...

天台一只小蜗牛 6607

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

Camera2Demo

在Camera2 的基础上进行封装,使得Camera2一堆初始化逻辑与Activity分离,降低耦合度,完成预览拍照并保存的操作

Greenplum的简单介绍

Greenplum的介绍   Greenplum是一个面向数据仓库应用的关系型数据库,它基于流行的PostgreSQL开发,因为有良好的体系结构,所以在数据存储,高并发,高可用,线性扩展,反应速度,易用性和性价比等方面有非常明显的优势,非常受欢迎.进入大数据时代以后,Greenplum的性能在TB级别数据量的表现上非常优秀,单机性能相比Hadoop要快上好几倍;在功能和语法上,要比Hadoop...

云计算大数据学习之小学生的博客 2万+

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

上一篇: Oracle内连接、外连接
下一篇: Oracle常用函数
VRML_0504
博客等级 码龄15年 1粉丝 15原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值