ods dw dm 说明

最新推荐文章于 2022-09-27 16:48:04 发布
原创 最新推荐文章于 2022-09-27 16:48:04 发布 · 367 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#数据仓库

ods dw dm 说明

  • ODS——操作性数据

  • DW——数据仓库

  • DM——数据集市

  1. 数据中心整体架构

在这里插入图片描述

数据中心整体架构
数据仓库的整理架构，各个系统的元数据通过ETL同步到操作性数据仓库ODS中，对ODS数据进行面向主题域建模形成DW（数据仓库），DM是针对某一个业务领域建立模型，具体用户（决策层）查看DM生成的报表。

  1. 数据仓库的ODS、DW和DM概念在这里插入图片描述

ods、dw、dm区分
3.ODS、DW、DM协作层次图
在这里插入图片描述

协作层次
4.通过一个简单例子看这几层的协作关系

在这里插入图片描述

例子
5.ODS到DW的集成示例

最低0.47元/天 解锁文章
数据科学家之路: 数据仓库开发教程 (DW)- 数据模型架构&编码规范 & 分层 ODS / DWD / DWS / ADS...
09-18 1万+
数据层次的划分ODS：Operational Data Store，操作数据层，在结构上其与源系统的增量或者全量数据基本保持一致。它相当于一个数据准备区，同时又承担着基础数据的记录以及历史...
数仓及其维度(分层)建模(ODS DWD DWS DWT ADS)
weixin_45532984的博客
05-12 1万+
一. 数仓及其维度 1. 什么是数仓？ 数据仓库，简称数仓,（ Data Warehouse ）。从逻辑上理解，数据库和数仓没有区别，都是通过数据库软件实现存放数据的地方，只不过从数据量来说，数据仓库要比数据库更庞大。 数仓主要是为企业制定决策，提供数据支持的。当业务简单，可以用数据库来存储，分析，制表。但当数据量几何式增长，需要跨机器整合时，数仓就是非常必要的了。 2. 数仓的特点 （1）集成性 数仓中存储的数据来源于多个数据源，原始数据在不同数据源中的存储方式.........
数仓理论- 02 数据仓库架构
m0_46507516的博客
06-04 945
数据仓库
数据仓库知识之ODS/DW/DM
xingchaojun的专栏
07-19 1万+
数据仓库的整理架构，各个系统的元数据通过ETL同步到操作性数据仓库ODS中，对ODS数据进行面向主题域建模形成DW（数据仓库），DM是针对某一个业务领域建立模型，具体用户（决策层）查看DM生成的报表。 数据中心整体架构图 数据仓库的ODS、DW和DM概念 ODS、DW、DM协作层次图   通过一个简单例子看这几层的协作关系 ODS到DW的集成示例   ...
DW与DM
weixin_30735391的博客
02-19 465
DW组成部分简介 DW的组成部分有：针对数据源的分析、数据的ETL、数据的存储结构，元数据管理等。 数据源分析 主要是分析要抽取哪些数据，如何抽取（全量还是增量）？它的更新周期是怎么样的？它的数据质量如何？ 确定数据的格式，数据的域。 ETL ETL之前需要知道以下内容，数据源有哪些系统，各个业务系统的RDBMS是什么？是否存在手工维护的数据？ 数据抽取...
数据仓库简介-ODS、DW和DM概念区分
03-28 1万+
一、什么是数据仓库 数据仓库是决策支持系统（dss）和联机分析应用数据源的结构化数据环境。 数仓的数据来源一般有：日志采集系统、业务系统数据库、爬虫系统等。通过对数据仓库中的数据进行分析，可以帮助企业改进业务流程、控制成本、提高产品质量等。 举例： 对于一个电商App，数据显示对于进入支付页面的用户，只有30%进行了支付，这是一个反常的数据。这个时候产品经理进行分析，发现支付按钮的...
数仓分层ODS DW DM
最新发布
02-09
与 ODS 不同的是，DW 中的数据往往会被定期归档而不是简单删除，从而确保能够满足长时间范围内的数据分析要求[^1]。 ```sql CREATE TABLE dw_customer_transactions AS WITH cleaned_ods_data AS ( SELECT ...
【转】数据仓库ODS、DW和DM概念区分
热门推荐
与优秀的人在一起，会使自己变得更优秀
06-27 8万+
今天看了一些专业的解释，还是对ODS、DW和DM认识不深刻，下班后花时间分别查了查它们的概念。 ODS——操作性数据 DW——数据仓库 DM——数据集市 1.数据中心整体架构     数据中心整体架构 数据仓库的整理架构，各个系统的元数据通过ETL同步到操作性数据仓库ODS中，对ODS数据进行面向主题域建模形成DW（数据仓库），DM是针对某一个业务领域建立模型，具体用...
数据仓库DW、ODS、DM概念及其区别
weixin_52321674的博客
09-30 890
整体结构 在具体分析数据仓库之前先看下一下数据中心的整体架构以及数据流向 数据中心整体架构 DB 是现有的数据来源，可以为mysql、SQLserver、文件日志等，为数据仓库提供数据来源的一般存在于现有的业务系统之中。 ETL的是 Extract-Transform-Load 的缩写，用来描述将数据从来源迁移到目标的几个过程： Extract，数据抽取，也就是把数据从数据源读出来。 Transform，数据转换，把原始数据转换成期望的格式和维度。如果用在数据仓库的场景下，Transfo.
ODS、DW和DM
u013165852的博客
10-24 661
ODS、DW和DM 参考资料： 数据仓库ODS、DW和DM概念区分：https://www.jianshu.com/p/72e395d8cb33 posted @ 2018-10-24 17:27 酸奶加绿茶 阅读(...) 评论(...) 编辑 收藏 ...
数据中心建设方案 ods应用
11-24
电子政务数据中心建设方案，ods在电子政务中的应用
数据仓库(DW)与操作型数据存储(ODS)
12-24
在操作型数据库(事务型数据库.一般采用结构化数据库)和数据仓库架构盛行的时代,面向服务的架构(soa)需要实时的BI,操作型数据仓库是一个好的选择
数据中心ODS磁盘组扩容实施方案
04-25
数据中心ODS磁盘组扩容实施方案，文档包含数据中心生产系统一整套的ODS磁盘组扩容方案，包含实施前后各项准备工作。
数据分层/ODS/DW/DM
thdline的博客
06-29 4422
数据分层/ODS/DW/DM数据分层数据分层的目的ODS层 （Operational Data Store 又称数据运营层）DW层（data warehouse 数据仓库）DM层 (data market 数据集市） 数据分层 数据分层的目的 我们对数据进行分层的一个主要原因就是希望在管理数据的时候，能对数据有一个更加清晰的掌控，详细来讲，主要有下面几个原因： 1.清晰数据结构：每一个数据分层都有它的作用域，这样我们在使用表的时候能更方便地定位和理解。 2.数据血缘追踪：简单来讲可以这样理解，我们最终给业
ODS、DW、DM
代码过客
05-06 775
https://zhuanlan.zhihu.com/p/354299771 ODS、DW、DM 鑫第弟 本科生的小渣渣 由于网上的资料过于片段化，导致我们在了解ODS、DW、DM时，不能很好的掌握理解该部分知识，而且查阅过多资料属实浪费时间。所以我将知识整理，以便更好的了解该部分知识，文章最后将给出参考来源。 先介绍几个概念 （1）DB（数据库），是现有的数据来源（也称各个系统的元数据），可以分为mysql、SQL Server、文件日志等，为数据仓库提供数据来源的一般存在于现有的业务系统之中。 （2）
ODS与DW之间的关系
weixin_39578428的博客
01-28 663
1、什么是数据仓库？ 数据仓库是面向主题的、集成的、相对稳定的、反应历史变化的数据集合，主要用于决策支持和信息的全局共享。 时效：T+1 2、什么是ODS？ ODS全称为Operational Data Store，即操作型数据存储，是“面向主题的、集成的、可变的、反映当前数据值的和详细的数据的集合，用来满足企业综合的、集成的以及操作型的处理需求”。 ODS是数据仓库体系结构...
ods,dw,dm理解
ml_hhy的博客
11-01 1万+
ods，dw，dm解释与理解 ods：操作性数据仓库ods的应用场景 1.在业务系统和数据仓库之间形成一个隔离，ods直接存放从业务系统抽取过来的数据，这些数据从结构和数据上与业务系统保持一致，降低了数据抽取的复杂性。 2.转移一部分业务系统的细节查询功能，因为ods存放的数据与业务系统相同，原来有业务系统产生的报表，现在可以从ods中产生了。 3.完成数据仓库中不能完成的功能。ods存放的是明细...
（数据架构）浅析数据库(DB)、操作数据存储(ODS)和数据仓库(DW)的区别与联系（转载）
达中的专栏
02-06 1646
文章背景： 相信大部分刚接触上面三个概念的同学，都多多少少会有些迷惑，现在我就给大家简单分析下这三者的关系，希望大家对这三者的概念理解有所帮助吧。 本文主要从下面两类关系来叙述上面三者的关系： 数据库（DB）和数据仓库（DW）的区别与联系 操作数据存储（ODS）和数据仓库（DW）的区别与联系 数据库与数据仓库的区别与联系 数据库与数据仓库基础概念： 数据库：传统的关系型数据库的主要应用...
ODS DW APP DIM 数仓
zhang的博客
09-27 506
大数据 数仓
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值