数据中台建设(七):数据资产管理

大咖分享|姚秀清:数据资产管理平台如何建设? 讲师介绍 姚秀清(秀清) 华南交付中心负责人&数据专家。10余年行业数据经验,擅长为企业数字化转型提供专业的技术方案和实施服务,帮助企业高效的建立数据中台,提高企业数据资产的使用效率。曾服务客户主要集中在制造业、交通、地产、公安、政务、财政等领域,主导建业数字大脑项目、广州好莱客数据治理项目,建设数据治理体系,提升全流程数据质量,支撑企业数字化运营。 以下内容为秀清分享内容整理而成 一、数据资产管理概述 1. 什么是数据资产? 由企业过去的交易或事项形成的,由企业合法拥有或控制,且预期在未来 阅读详情

数据资产管理

随着企业数据越来越大,企业意识到数据是一种无形的资产,通过对企业各业务线产生的海量数据进行合理管理和有效应用,能盘活并充分释放数据的巨大价值。如果不能对海量数据进行有效管理和应用,企业堆积如山的数据给企业带来的是高昂的成本,数据就用不起来,也用不好。

通过数据资产管理可以保证数据的全生命周期高质量的能力,还可以为各类角色用户提供数据资产的直观视图,方便用户查看和使用数据资产,构建数据资产管理的最终目的是为了提升数据价值,使数据持续赋能业务。

数据资产管理和传统的数据治理实际上区别不大,包含了所有数据治理内容,同时还有数据价值管理和数据共享管理内容,可以认为数据资产管理就是数据治理的升级版,是数据治理 2.0 版本。

数据资产管理的内容主要包括:数据标准管理、元数据管理、主数据管理、数据质量管理、数据安全管理、数据交换管理(数据共享管理)、数据生命周期管理七个方面。

一、数据标准管理

数据标准(Data Standards)是进行数据标准化的主要依据,构建一套完整的数据标准体系是开展数据标准管理工作的良好基础,有利于打通数据底层的互通性,提升数据的可用性。用通俗的话讲数据标准就是在组织内定义一套关于数据的规范,好让我们都能理解这些数据的含义。例如:对于银行系统中的客户,核心系统人员认为在银行开户存钱的人就是客户,信贷系统人员认为在银行中贷款的人就是客户,理财系统的人认为理财的人就是客户等。

以上如果没有统一标准的话,不仅增加沟通成本,而且项目实施、交付、信息共享、数据集成、协同工作往往会出现各种问题,而数据标准管理就是将这一套数据标准,通过各种管理活动,推动数据进行标准化的一个过程,是数据标准落地必不可少的过程。数据标准管理包括标准定义、标准查询、标准发布。

二、元数据管理

元数据(Meta-data)是描述数据的数据。例如一个文本数据的大小,位置,创建人,创建日期等,这些数据就是该文本文件的元数据。元数据又分为业务元数据、技术元数据、操作元数据、管理元数据。

  • 业务元数据:与业务规则、流程相关的描述性数据。例如:人员信息数据中的统计时间、统计周期、统计区域范围等。

  • 技术元数据:与存储、访问等技术底层相关描述性数据。例如:人员信息数据存储在的位置、访问的 URL 地址,数据存储库,对应的表名,字段有哪些等。

  • 操作元数据:与数据操作相关的描述性数据。例如:人员信息数据上传人,上传时间,修改时间等。

  • 管理元数据:与数据管理相关的描述性数据。例如:人员信息数据访问权限,安全等级,质量等级,过期时间等。

元数据就是为了准确的描述我们拥有的所有数据。其核心的目的是降低人与数据之间的沟通成本。描述的越准确,我们使用数据的成本就越低。元数据管理主要包括元数据采集、血缘分析、影响分析等。

三、主数据管理

主数据(Master Data)就是关于业务实体的数据。主数据是关键业务实体的最权威、最准确、价值最大的数据,用于建立交易闭环。例如对于银行来说,用户账号、贷款账号信息、理财产品等就是主数据;对于电商网站,用户、商品就是主数据等。

由于 IT 系统建设的历史局限性,主数据分布在不同的应用系统,而不同的应用系统之间主数据的定义、属性、编码存在众多不一致,极大影响了系统和数据之间的融合与集成,因此需要进行主数据管理建设,统一规范企业级主数据。

主数据管理主要是对企业经营活动中所涉及的各类主数据制定统一数据标准和规范,如数据编码标准、主数据接口标准等,方便开发人员使用,统一企业各类数据。

四、​​​​​​​数据质量管理

数据质量就是确保组织拥有的数据完整且准确,只有完整、准确的数据才可以供企业分析、共享使用,随着公司数据的来源、形式越来越多,数据质量的战略价值也急剧上升。例如:检查某业务数据唯一性、完整性、数据流程转换过程一致性、数据真实性等。数据质量管理包括质量规则定义、质量检查、质量报告等。

五、数据安全管理

企业有些数据非常重要且敏感,这些数据大部分集中在应用系统中,例如银行系统中客户的联络信息、资产信息等,如果不慎泄露,不仅给客户带来损失,也会给银行带来不利的声誉影响,因此数据安全在数据管理和治理过程中是相当重要的。数据安全管理包括数据权限管理、数据脱敏、数据加密等。

六、​​​​​​​数据共享管理

数据共享管理就是数据交换管理,企业中随着时间和业务增长建立了众多的信息系统,但是随着信息系统的增加,各自孤立工作的信息系统将会造成大量的冗余数据和业务人员的重复劳动。例如数据仓库 DM 层分析人员信息中缺失数据,可以通过数据交换系统反哺到业务系统中,避免重复劳动。企业急需通过建立底层数据集成平台来联系横贯整个企业的异构系统、应用、数据源等,完成在企业内部的 ERP、CRM、SCM、数据库、数据仓库,以及其它重要的内部系统之间无缝的共享和交换数据,避免“数据孤岛”问题。

七、数据生命周期管理

任何事物都具有一定的生命周期,数据也不例外。从数据的产生、加工、使用乃至消亡都应该有一个科学的管理办法,将极少或者不再使用的数据从系统中剥离出来,并通过核实的存储设备进行保留,不仅能够提高系统的运行效率,更好的服务客户,还能大幅度减少因为数据长期保存带来的储存成本。

数据生命周期一般包含在线阶段、归档阶段(有时还会进一步划分为在线归档阶段和离线归档阶段,即离线数仓和实时数仓构建,将数据存入数仓)、销毁阶段三大阶段,数据生命周期管理内容包括建立合理的数据类别,针对不同类别的数据制定各个阶段的保留时间、存储介质、清理规则和方式、注意事项等。

数据资产管理(一):概述 数据资产管理通过构建全面有效的管理体系,一方面规范数据资产采集、加工、使用过程,提升数据质量,保障数据安全,另一方面丰富数据资产应用场景,建立数据资产生态,持续运营数据资产,显性数据资产价值,为资产计量确认提供了良好的数据条件和能力基础,进一步推动数据要素流通,加速要素市场化。 阅读详情

相关推荐

数据中台(七) 数据中台架构

总体架构图 数据存储 计算引擎 数据汇聚 数据汇聚是把数据资源通过实时、批量的方式存储到数据中台。基本是按照数据的原始状态堆砌在一起的,是企业对过往所有IT信息化建设积累的成果的融合。 数据开发 数据开发是数据资产内容建设的主战场,是数据价值生产过程中核心环节。数据资源是原材料,数据资产是商品,数据开发就是商品生产流水线,通过这条流水线将数据资源转换成数据资产。 为了降低开发难度,提高开发效率,需要一个可视化的开发平台,主要包括以下产品功能: 数据体系 数据体系是在

知行合一 1万+

数据资产管理介绍

数据资产管理介绍 1.定义 在明白数据资产管理之前,要明白管理的数据资产是什么? “数据资产”定义为:“由企业拥有或控制的,能够为企业带来未来经济利益的,以物理或者电子的方式记录的数据资源,如文件资料、电子数据等。” 从上面的数据资产定义来看,数据资产具有如下3个特征: 1)“企业拥有或控制”。 这个特征指明数据是有其主体的,同时也说明数据资源既可能来源于企业内部的信息系统或者日常经营活动的沉淀, 可能是企业通过外部的交换、购买等手段获取的。 2)“能带来未来经济利益”。 这个特征清楚表明,在

m0_62396648的博客 6582

数据中台【建设步骤】

1.组织规划 1.1 制定战略规划 1.2 完善组织结构 1.3 建立制度体系 1.4 设置审计机制 1.5 进行培训宣贯 2.现状梳理 2.1 组织现状 2.2 业务现状 2.3 技术现状 2.4 数据资源现状 2.4.1 数据资源的分类 2.4.2 数据资源的梳理步骤 3.应用服务规划 3.1 数据应用规划 3.1.1 数据应用分类 3.1.2 数据应用规划步骤 3.1.3 数据应用评估模型 3.2 数据服务规划 3.2.1 数据服务分类 3.2.2 数据服务的核心价值 3.2.3 数据服务类型

程序员学习圈 6731

数据中台7--数据资产管理

随着企业数据越来越大,企业意识到数据是一种无形的资产,通过对企业各业务线产生的海量数据进行合理管理和有效应用,能盘活并充分释放数据的巨大价值。如果不能对海量数据进行有效管理和应用,企业堆积如山的数据给企业带来的是高昂的成本,数据就用不起来,也用不好。通过数据资产管理可以保证数据的全生命周期高质量的能力,还可以为各类角色用户提供数据资产的直观视图,方便用户查看和使用数据资产,构建数据资产管理的最终目的是为了提升数据价值,使数据持续赋能业务。

weixin_59295776的博客 467

企业数据中台建设思路

企业数据中台建设思路

从知识输入到知识输出 2376

数据中台建设(八)—— 数据资产管理

随着企业数据越来越大,企业意识到数据是一种无形的资产,通过对企业各业务线产生的海量数据进行合理管理和有效应用,能盘活并充分释放数据的巨大价值。如果不能对海量数据进行有效管理和应用,企业堆积如山的数据给企业带来的是高昂的成本,数据就用不起来,也用不好。通过数据资产管理可以保证数据的全生命周期高质量的能力,还可以为各类角色用户提供数据资产的直观视图,方便用户查看和使用数据资产,构建数据资产管理的最终目的是为了提升数据价值,使数据持续赋能业务。

weixin_47088026的博客 1547

数据中台建设(规划篇)

一 什么是数据中台 1.1 数据中台的定义 数据中台不是数据平台,数据中台是处于业务前台和技术后台的中间层,是对业务提供的数据能力的抽象和共享的过程, 数据中台通过将企业的数据变成数据资产,并提供数据能力组件和运行机制,形成聚合数据接入、集成、清洗加工、建模处理、挖掘分析,并以共享服务的方式将数据提供给业务端使用,从而与业务产生联动,而后结合业务系统的数据生产能力,最终构建数据生产>消费>再生的闭环,通过这样持续使用数据、产生智能、反哺业务从而实现数据变现的系统和机制。

cdfunlove的博客 4734

数据中台:宜信敏捷数据中台建设实践|分享实录

内容来源:宜信技术学院第2期技术沙龙-线上直播|宜信敏捷数据中台建设实践 分享嘉宾:宜信数据中台平台团队负责人 卢山巍 导读:宜信于2017年推出了一系列大数据开源工具,包括大家熟悉的DBus、Wormhole、Moonbox、Davinci等,在技术社区内得到了广泛关注和好评。这些工具是如何在宜信内部应用的?它们和宜信数据中台是怎样的关系?又是如何驱动各种日常数据业务场景的? 本次分享对这些问...

gao2175的博客 4515

数据中台专栏(四):数据中台设计与数据资产管理

https://yq.aliyun.com/articles/630211 袋鼠云大数据解决方案专家。专注于云计算、大数据、企业级技术架构(EA)等领域,在互联网、零售、工业等行业有深入的理解和丰富的从业经验,曾带领项目团队完成中金易云、货币网、固德威等企业级大数据项目交付,擅长行业大数据解决方案的咨询与落地。 正文:正文 企业的发展,往往伴随着业务更多元化,也必然会促进更多的业...

8074

企业数据中台整体介绍及建设方案:文件全文51页,附下载

数据中台建设的核心是平台化建设。这些服务跟企业的业务有较强的关联性,是这个企业独有的且能复用的,它是企业业务和数据的沉淀,其不仅能降低重复建设、减少烟囱式协作的成本,也是差异化竞争优势所在。数据中台是一套可持续让企业的数据用起来的机制,是依据企业特有的业务模式和组织架构,通过有形的产品和实施方法论支撑,构建一套把数据变成资产并服务于业务的机制。企业应该建立部门间协调机制,尤其是需要技术和业务部门间密切协作,充分发挥各部门的优势,建立统一的数据标准和流程,从而保证数据的质量和准确性,提高数据资产的价值。

byte58的博客 1509

数据资产管理

玩转数据资产 遵循“微服务、大平台、轻技术、易操作”的设计理念,以大数据处理技术为支撑, 以数据规划与管理咨询方法为指导,以数据聚合、治理、融合、服务为核心,致力于为用户提供有效的数据资产沉淀工具, 服务数据资产管理、数据治理、数据仓库建设、数据中台落地等企业诉求,实现数据驱动业务,支撑数据价值发现。 数据资产目录 1. 数据有哪些、是什么、在哪里一目了然 2. 企业级结构化数据、非结构化数据统一的资源目录,及数据查询与申请 元数据管理 1.元数据自动采集、动态感知,版本差异标记 2.元数

. 6234

【数据中台】企业如何搭建适合自己的数据中台?

数据中台是企业数据价值实现的能力框架,包括数据存储汇聚、数据开发、数据管理、数据服务、数据资产运营等能力,是企业业务数据化的承载体,是企业业务通过数据视角的一种呈现,担负了企业数字化所需的核心综合数据能力。数据资产管理是数据中台面向企业提供数据能力的一个窗口,数据资管理将企业的数据资产统一管理起来,实现数据资产的可见、可用、可运营。数据集成没有统一的定义数据的标准,没有统一的数据存储规范,只是粗放地收集数据,把数据散乱地存放在服务器里,这些数据还不能被使用和赋能业务,这些集成后的数据也不能称之为数据资产。

qq_39172059的博客 1529

数据中台(三)数据中台设计与数据资产管理

本文作者:王立飞 袋鼠云大数据解决方案专家。专注于云计算、大数据、企业级技术架构(EA)等领域,在互联网、零售、工业等行业有深入的理解和丰富的从业经验,曾带领项目团队完成中金易云、货币网、固德威等企业级大数据项目交付,擅长行业大数据解决方案的咨询与落地。 正文:正文 企业的发展,往往伴随着业务更多元化,也必然会促进更多的业务数据产生,也为企业实现业务数据化和数据业务化带来了更多的可能性,但现实是很多企业依然采用传统理念去建设大数据平台,导致不单单业务系统是一个个烟囱,大数据...

wenyusuran的专栏 2291

数据中台 第3章:数据中台建设与架构

3.1 持续让数据用起来的价值框架 数据中台的使命就是持续让数据用起来,它的一个根本性创新就是 把“数据资产”作为一个基础要素独立出来,让成为资产的数据作为生产 资料融入业务价值创造过程,持续产生价值。 数据中台作为整个企业各个业务所需数据服务的提供方,通过自身的平 台能力和业务对数据的不断滋养(业务数据化),会形成一套高效可靠 的数据资产体系和数据服务能力(数据资产化和资产服务化)。这样一 来,当出现新的市场变化,需要构建新的前台应用时,数据中台可以迅速提供数据服务(服务业务化),从而敏捷地响应企业的创

. 2628

Cadence 17.2配置CIS数据库报错?手把手解决ODBC驱动位数不匹配问题

本文详细解析了Cadence 17.2配置CIS数据库时常见的ODBC驱动位数不匹配问题,提供了从系统环境检查到分步解决方案的完整指南。重点解决32位应用程序与64位ODBC驱动之间的架构冲突,包含驱动安装、DSN配置及高级排查技巧,帮助电子工程师快速恢复设计环境。

play7的博客 970

手把手教你用OpenCalib完成激光雷达与相机联合标定:从数据准备到结果可视化

本文详细介绍了使用OpenCalib工具链中的lidar2camera模块完成激光雷达与相机联合标定的全流程,包括数据准备、标定命令执行、结果验证与可视化。通过实战指南,帮助读者掌握工业级标定技术,提升自动驾驶和机器人领域的传感器融合精度。

weixin_30872499的博客 398

数据中台建设与应用_教你五步建设数据中台

数据中台是当下非常热门的话题,可以解决企业重复造轮子的问题。虽然数据中台在互联网企业中已经有了多年的实践,但是对于传统企业来说还是一个比较新的话题。数据中台的价值与建设的必要性数据中台是数据化建设的基础数据中台的第一个价值是解决了全域数据汇聚的问题,传统的数据仓库、数据中心,乃至数据湖都以解决这个问题作为核心目标。数据中台建设之所以从企业内的数据资源盘点做起,也是希望能够把这件事情做得更加完整和更...

weixin_39944542的博客 2028

从零到一:构建嵌入式Nginx的模块化架构与跨平台部署实战

本文详细介绍了在ARM32架构的RV1126嵌入式设备上,通过交叉编译技术构建模块化Nginx服务器的完整实战流程。涵盖环境配置、依赖库编译、Nginx核心与http_ssl_module等模块集成、性能优化及部署调试,为嵌入式开发提供高效可靠的Web服务器解决方案。

rock5的博客 202

【数据中台】数据中台的建设方法与开发实践

2015年阿里在国内首次提出了中台概念,由阿里引领发展,迅速在互联网企业中形成了一股浪潮。在数字化转型的道路上,为了充分发挥数据价值,数据中台的理念也渐渐深入到各行各业中。数据中台,不是一套系统,同样也不是一个平台。它是一种企业的建设机制,植根企业特色,借助有形的产品和实施方法论,持续不断的整合数据、分析数据、挖掘数据价值。中台的构建不是一蹴而就的事情,今天我们就来简单聊一聊在数据中台中如何做数据开发。

qq_39172059的博客 3396

英飞凌TLF35584 SBC实战:手把手教你配置WDG看门狗与ERR监控(基于AUTOSAR架构)

本文详细介绍了基于AUTOSAR架构的英飞凌TLF35584 SBC芯片WDG看门狗与ERR监控功能的配置方法。通过硬件平台搭建、寄存器级配置、AUTOSAR模块集成及诊断策略优化,帮助开发者快速掌握关键配置技巧,提升嵌入式系统的安全性和可靠性。

weixin_30256901的博客 476

准静态电磁场

叠加法 缺点:对于连续分布的电荷,叠加法的计算比较困难 虚位移法 概念 广义坐标:确实系统中导体形状、尺寸与位置的一组独立几何量。 广义力:企图改变某一广义坐标的力。 功:广义力乘上由它引起的广义坐标的改变量。 公式 ...

qq_35912930的博客 1860
上一篇: 数据产品经理的三大底层思维
下一篇: 数据中台建设(六):数据体系建设
wrr-cat
博客等级 码龄9年 128粉丝 302原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值