- 博客(6)
- 收藏
- 关注
RSS订阅原创 Modify HAWQ catalog table
1. Edit gp_segment_config.h to reflect the new design2. Run "perl tidycat.pl gp_segment_config.h" to generate some files, located in /tmp/ like, indexing.h, bootparse.y, pt_type.h, toasting.h, toasting.c, catalog.c. In this case, merge catalog.c and i...
2021-06-15 17:16:04
96
原创 在VMWare Fusion中为宿主机磁盘缩容
24. Shrink disk space for VM guest in VMWare Fusion1) Linux VM guestStep 1: make sure VM Tools are installedStep 2: run below shell script$ cat ~/Downloads/vm_shrink.sh#!/bin/bashdisk_list=`sudo vmware-toolbox-cmd disk list`for disk in ${disk_
2021-06-14 15:44:57
420
原创 在Linux系统上打开core dump
Enable core dump on LinuxStep 1. Set ulimit unlimited in /etc/profileulimit -c unlimited > /dev/null 2>&1Step 2. Set core unlimited in /etc/security/limits.conf* soft core unlimitedStep 3. Set core pattern in /proc/sys/kernel/core_pattern
2021-06-14 15:39:49
174
原创 在Linux系统上创建交换区
Setup swap for Linuxdd if=/dev/zero of=/data/swapfile bs=1M count=10240chmod 0600 /data/swapfilemkswap /data/swapfileswapon /data/swapfile
2021-06-14 15:34:10
116
原创 从数据分层看实时数仓的三种架构
关于数据仓库中数据分层，每个企业根据自己的业务需求可以有不同的划分。但一般会分为四个层：数据运营层、数据仓库层、数据服务层、数据集市。1. 数据运营层（ODS - Operational Data Store）数据运营层，也称数据准备区或者贴源层。它是指数据仓库源头系统的数据表通常会原封不动的存储一份，从而作为后续数据仓库加工数据的来源。ODS层数据的来源方式包括业务数据库、应用的埋点数据、消息队列等。2. 数据仓库层（DW - Data Warehouse）：数据仓库层由下到上为细节数据层（DW
2021-05-27 16:54:08
619
原创 数据仓库、数据湖、湖仓一体的基本特点
本文介绍什么是数据仓库，数据湖，湖仓一体，并1. 数据仓库数据仓库的英文名为Data Warehouse，简写为DW。它由数据仓库之父比尔·恩门 （Bill Inmon）于1990年提出。数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。它具有以下典型的特点：高执行效率：数据仓库处理的数据量巨大，且分析周期一般以天为单位，因此对分析的时效性要求相对较高，这就需要它具有高效率的数据存储和处理能力。 高数据质量：进入数据仓库的数据一般会经过数据清洗的环节，因此
2021-04-21 10:59:14
1089
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人