数据治理实战——翼支付金融板块业务数仓建设和数据治理之路

目录

一、数据治理背景

二、数据治理建设内容

2.1 组织协同

2.2 平台建设

2.3 数据应用治理

2.4 数据规范

2.5 数据安全

三、企业级数仓建设

3.1 调研阶段

2.2 平台护航

2.3 数仓分层

2.4 维度建模

2.4.1 维度建模四步曲

2.4.2 命名规范

2.4.3 资产沉淀

2.4.4 任务保障

2.5 数据监控

四、数据治理成效

4.1 成本&时效

4.2 元数据

4.3 数据安全

4.4 指标管理

五、未来规划

---

  原文大佬的这篇数据治理及数仓建设案例有借鉴意义，这里摘抄下来用作学习和知识沉淀。

一、数据治理背景

   在数据仓库建设初期，翼支付主要面对以下几方面的问题：

（1）代码冗余，任务失效不稳定

    祖传代码问题严重，任务链路长，存在大量烟囱式开发。另外由于没有统筹管理，资源任意抢占，使得任务时效得不到保障。

（2）元数据信息严重缺失

   缺少元数据信息，没有明确的建表责任人，字段缺少中文备注，分区字段随意，一系列问题导致库表清理及新人上手难度大。

（3）数据安全风险高

   敏感数据未加密，数据下载入口多，大量明细数据通过Tableau （BI工具）进行处理，无下载记录，数据安全风险非常高。

<