
元数据管理
文章平均质量分 72
用于介绍元数据相关技术,产品等
shinelord明
北方待了10多年,北京六年多工作时间。先后在北京大唐电信,爱奇艺,京东等企业从事java开发、软件开发、与大数据开发、设计等相关工作。18年回重庆,在一家互联网金融公司,从事后端开发与大数据相关工作。
展开
-
【数据治理】Atlas-实现数据治理的利器
Atlas是一款强大的开源数据治理和元数据管理工具,旨在帮助组织管理其数据资产、了解数据血缘关系,并确保数据的合规性和安全性。本篇博客将深入探讨Atlas组件的各方面内容,包括应用架构、业务架构、数据架构、功能架构、技术架构等,并重点介绍其与大数据生态系统中Hadoop、Hive、HBase等组件的集成。血缘关系的采集是Atlas的核心功能之一,通过元数据管理和数据血缘追踪,用户可以了解数据的来源、传输路径和影响范围。Atlas的数据架构主要包括元数据存储和索引,用于存储和检索各种数据资产的元数据信息。原创 2023-04-20 20:37:48 · 663 阅读 · 0 评论 -
【大数据】基于CU,PO,RD,IPO矩阵图分析数据资产-自创
通过计算出的数据资产的可靠度,使用权重指标,可以对数据是否有下游使用,使用的重要程度,对数据是否可以归档或则销毁作为参考,以及对数据的价值,质量具有一定参考意义。像金融,社交媒体,视频网站,电商零售,传统房地产,车联网企业,制造业,工业互联网等每天都产生大量的数据,这些数据就像水一样,处理的好会成为一种力量能源,帮助公司的业务能够朝着正确的方向,更好更快的前进;数据资产管理,涉及对数据的复用,生产,数据资产成本分析,数据资产评级等,形成系统化的功能后,可以总结,并开发出数据资产管理相关的系统或产品。原创 2024-02-14 17:26:06 · 2019 阅读 · 0 评论 -
【大数据】元数据管理
元数据管理独立产品目前市场比较少,一般都是集成在大数据平台相关系统中的一个子系统。Atlas是一组可扩展和可扩展的核心基础治理服务,使企业能够有效,高效地满足Hadoop中的合规性要求,并允许与整个企业数据生态系统集成。亿信元数据管理系统(EsPowerMeta)是亿信华辰。绑定在火山引擎的组件中,是一个子套件。产品优势 独有的国产化数据建模工具。下表介绍几款元数据管理产品或组件。凭借多年的企业级数据仓库。和数据治理项目实施经验,自主研发的、业界领先的、通用的企业级元数据产品,凭借灵活的定制功能及。原创 2023-03-23 15:52:28 · 233 阅读 · 0 评论