
大数据
文章平均质量分 81
ywm041004
这个作者很懒,什么都没留下…
展开
-
数据治理、共享交换、数据仓库、数据中心的关系
数据中心不就是理解为搭建一套交换系统,将数据落地就OK了?最近写投标文档,项目要建立大数据中心,就没怎么考虑还是按照10年前的想法,数据中心不就是理解为搭建一套交换系统,将数据落地就OK了,就没怎么思索按照历史经验就去写方案,结果被专家一顿批,提出数据汇聚、数据治理的概念,这才开始小心翼翼的开始学习。经验害死人,搞IT就得不断的学习,不能固步自封。先将一些学习总结分享一下。有拍砖的可以直接下...原创 2018-11-04 00:07:41 · 21101 阅读 · 0 评论 -
聊一聊数据仓库中的元数据管理系统
原文地址一、元数据的定义按照传统的定义,元数据(Metadata)是关于数据的数据。在数据仓库系统中,元数据可以帮助数据仓库管理员和数据仓库的开发人员非常方便地找到他们所关心的数据;元数据是描述数据仓库内数据的结构和建立方法的数据,可将其按用途的不同分为两类:技术元数据(Technical Metadata)和业务元数据(Business Metadata)。技术元数据是存储关于数据仓库系统...转载 2018-11-15 14:08:26 · 2890 阅读 · 0 评论 -
大数据元数据和数据管理框架 Apache Atlas实践
原文地址 https://blog.youkuaiyun.com/oDaiLiDong/article/details/78052017今天技术小伙伴占卫同学分享了Apache Atlas元数据管理实践,被atlas的强大的血缘关系管理能力震撼,以下为本次分享内容:•Apache Atlas简介•Apache Atlas架构•Titan图数据库介绍•ApachAtlas配置•Apache Atla...转载 2018-11-19 22:05:19 · 11205 阅读 · 0 评论 -
数据治理的血缘分析
数据治理里经常提到的一个词就是血缘分析,血缘分析是保证数据融合(聚合)的一个手段,通过血缘分析实现数据融合处理的可追溯。有时被概念瞎蒙了,不知道到底如何追溯,落不了地。本人接触的数据治理项目还主要是将各个来源的数据进行整理融合,形成人地事物组织几个业务大类数据。至于详细的ODS、DWD、DWA等数据组织请阅读这篇文章:数据治理概述本文主要从数据追溯的业务需求来分析一下,一切还是要从需求出发,...原创 2018-11-19 22:56:07 · 40715 阅读 · 4 评论 -
大数据可视化设计
概述可视化效果分类业务设计原创 2018-12-23 23:36:44 · 10854 阅读 · 1 评论