数据产品_数据中台07_数据资产管理及服务

本文介绍了数据资产管理,包括任务、表、字段的管理,以及核心资产的标记方式。重点讨论了数据监控,如数据安全、数据质量和使用情况的监控。此外,文章探讨了指标管理的三个层面,从元数据管理到提供API服务。还提到了标签管理的流程,从需求到标签的上架服务,并以阿里云Dataphin作为数据产品调研案例。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

任务|表|字段

数据资产很核心的就是对任务、表、字段做管理以及服务

首先我们要标记出来核心资产。最核心的数仓中间层所涉及到的表,这些表、字段、任务(任务中包含很多加工逻辑,这里面包含了很多业务知识,业务策略)都是公共的公用的,对整个业务都有很大作用的。比如说以下很多核心字段。

任务:关键节点,比如当这个任务挂了,下游很多都会受到影响。核心业务逻辑:任务之所以把它列为核心资产也是因为任务中包含很多逻辑,这些逻辑隐含了很多知识,如果丢失了会造成很多问题。

标记的方式

自动识别:可以通过数据的使用情况,比如我这个表下游有很多依赖,下游很多数据都使用这个表的数据。以及每天使用频次频率非常多。也就是说,可以根据使用情况自动给表打标签。

监控

并不需要对所有的数据进行监控,因为没有那么大的资源。

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值