ODS(Operational Data Store)操作型数据存储

最新推荐文章于 2024-05-25 00:47:25 发布
最新推荐文章于 2024-05-25 00:47:25 发布
阅读量1.6k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 数据库理论、设计与挖掘 杂感随笔 文章标签： 数据仓库 database 数据库 存储
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/longronglin/article/details/5317711
ODS作为数据库到数据仓库的过渡层，提供了一种有效的解决方案来填补传统数据仓库可能存在的空白。它通过将原始数据进行初步整合和清理，为后续的数据分析和BI应用打下坚实的基础。

DB(database) ---- ODS ---- DW(dataware)

ODS提供了数据库到数据仓库的中间层

可以解决没有DW的部分问题。

离线数仓-数据仓库系统
kkddd35的博客
03-10 4537
数据模型就是数据组织和存储方法，它强调从业务、数据存取和使用角度合理存储数据。只有将数据有序的组织和存储起来之后，数据才能得到高性能、低成本、高效率、高质量的使用。高性能：良好的数据模型能够帮助我们快速查询所需要的数据。低成本：良好的数据模型能减少重复计算，实现计算结果的复用，降低计算成本。高效率：良好的数据模型能极大的改善用户使用数据的体验，提高使用数据的效率。高质量：良好的数据模型能改善数据统计口径的混乱，减少计算错误的可能性。事实表作为数据仓库维度建模的核心，紧紧围绕着业务过程来设计。
数仓实践：一文读懂数仓 ODS 层模型设计
云祁QI
07-28 1270
具体使用的方式可用全外连接（full outer join） + 数据全量覆盖重新加载（insert overwrite）的方式，即如日调度，则将当天增量数据和前一天全量数据做全外连接，重新加载为最新的全量数据。具体使用的方式可用主键去重（row_number）+ 数据全量覆盖重新加载（insert overwrite）的方式，即如日调度，则将当天增量数据和前一天全量数据合并后根据主键去重，重新加载为最新的全量数据。其中：OLD 表存储最近 N 天之前的数据，这部分数据不再使用 delta 增量数据更新。
ODS（Operational data Store ）数据操作存储 _学习笔记
04-15 627
ODS 是一个面向主题的、集成的、可变的，当前细节数据的集合，用于支持即时性、集成的全体信息需求。ODS 的数据存 储结构应于仍数据事务型数据库系统一致（应需求而定），因此ODS数据可以不做抽取、转换，而将数据完...
数据仓库(DW)与操作型数据存储(ODS)
12-24
在操作型数据库(事务型数据库.一般采用结构化数据库)和数据仓库架构盛行的时代,面向服务的架构(soa)需要实时的BI,操作型数据仓库是一个好的选择
ODS(Operational Data Store)定义
weixin_34216196的博客
10-18 401
ODS（Operational Data Store）可操作的数据存储。 　　很多人对ODS究竟是什么有很多的困惑，ODS对于不同的人可以有不同的看法，我主要说说什么是最主流的定义。首先我们需要注意，ODS不同于数据仓库（Data warehouse）或数据集市(Data mart)。数据仓库是用来保存公司来自很多不同的来源的历史数据，并主要将这些数据用于趋势分析，生成报表的地方。它是一个公司很...
操作型数据存储区
javavsnet
02-22 248
[url]http://jingh3209.blog.163.com/blog/static/156966720091054453352/[/url] 操作型数据存储区（ODS，Operational Data Store），是为了弥补业务系统和数据仓库之间的数据同步差距而提出的，要解决的问题："对一个特定的业务流程来说，怎么才能提供最新的、跨功能部门之 间的信息"，例如对客户服务人员，他需...
操作型数据存储ODS在数据仓库中的研究与应用
在信息技术领域，数据仓库的技术不断演进，其中一种新兴的技术就是操作型数据存储（ODS，Operational Data Store）。 ODS是数据仓库的一种变体，它介于传统的关系型数据库管理系统（RDBMS）和数据仓库之间。ODS主要...
操作数据存储和数据集市.pptx
最新发布
07-21
ODS（Operational Data Store）是一种特殊的数据库，主要用于支持企业的即时性、操作性和集成性的全局信息需求。ODS具备以下特点：它是一种面向主题的、集成的、可变的、当前的细节数据集合；它介于联机事务处理...
Oracle_data_warehouse.rar_ 数据仓库_Data Warehouse orac_oracle_wareh
09-14
数据分层包括源系统层、ODS（Operational Data Store）层、DWH（Data Warehouse）层和OLAP立方体。 5. Oracle Advanced Analytics：Oracle提供了强大的高级分析功能，如Oracle Data Mining、Oracle R Enterprise等...
数据仓库ods层是啥意思_ODS层简介和ODS层设计
weixin_39553757的博客
12-20 2706
1. 引言本篇主要讲述操作数据存储(ODS)系统产生的背景、定义、特点，以及它与数据仓库的区别。在前两篇，笔者介绍了什么是数据仓库？为什么需要数据仓库？数据仓库系统的体系结构是什么？因此可能在读者心里已经形成了企业数据存储的DB~DW两层体系结构的概念，但在实际应用中，并不总是这样，有时候我们可能需要ODS这一系统来搭建DB~ODS~DW三层数据体系，那么什么是ODS？为什么需要ODS？ODS与D...
ODS（操作型数据存储)
2301_77836489的博客
05-25 1164
ODS（操作型数据存储)
操作数据存储
ctbn98833的博客
08-21 381
在数据仓库架构中有一种部件叫Operational Data Store（ODS），中文一般翻译为“操作数据存储”。操作数据存储在通常的数据仓库架构中都是一个可选的部件，它和数据仓库起到互相补充的作用。 最早给ODS下定义的应...
什么是ODS（Operational Data Store）
寒江的专栏
09-18 7180
什么是ODS？ ODS（Operational Data Store）是数据仓库体系结构中的一个可选部分，ODS具备数据仓库的部分特征和OLTP系统的部分特征，它是“面向主题的、集成的、当前或接近当前的、不断变化的”数据。 ODS是一个面向主题的、集成的、可变的、当前的细节数据集合，用于支持企业对于即时性的、操作性的、集成的全体信息的需求。 Kimball关于ODS的定义（>）： –是
Designing the Operational Data Store
(Andrew)的专栏
09-01 1638
Recently there has been controversy over the validity and makeup of the architectural structure known as the operational data store (ODS). Some skeptics question the existence of the ODS. This argument is quite strange because the ODS is one of the most pe
Operational Data Store (ODS) Defined
lizarb的专栏
06-04 632
I see a lot of confusion on what exactly is an Operational Data Store (ODS).  While it can mean different things to different people, I’ll explain what I see as the most common definition.  First let
数据仓库
qq_44949002的博客
11-21 1338
答：并行的，dw 层问：那其实对于同一个数据，这两个过程是串行的?ODS 全称是 Operational Data Store，操作数据存储.“面向主题的”，数据运营层，也叫ODS层，是最接近数据源中数据的一层，数据源中的数据，经过抽取、洗净、传输，也就说传说中的 ETL 之后，装入本层。概念：是数据仓库的细节数据层，是对STAGE层数据进行沉淀，减少了抽取的复杂性，同时ODS/DWD的信息模型组织主要遵循企业业务事务处理的形式，将各个专业数据进行集中，明细层跟stage层的粒度一致，属于分析的公共资源。
大数据——一文详解数据仓库概念（数据仓库的分层概念和维度建模详解）
xdx_dili的博客
11-29 2087
大数据——一文详解数据仓库概念（数据仓库的分层概念和维度建模详解）
[数据仓库]分层概念,ODS,DM,DWD,DWS,DIM的概念
weixin_54132003的博客
12-01 3836
一. 各种名词解释 1.1 ODS是什么？ ODS层最好理解，基本上就是数据从源表拉过来，进行etl，比如mysql 映射到hive，那么到了hive里面就是ods层。 ODS 全称是 Operational Data Store，操作数据存储.“面向主题的”，数据运营层，也叫ODS层，是最接近数据源中数据的一层，数据源中的数据，经过抽取、洗净、传输，也就说传说中的 ETL 之后，装入本层。本层的数据，总体上大多是按照源头业务系统的分类方式而分类的。但是，这一层面的数据却不等同于原始数据。在源数据装入
ODS与DW
weixin_34217773的博客
10-03 215
【导读】ODS是一个面向主题的、集成的、可变的、当前的细节数据集合，用于支持企业对于即时性的、操作性的、集成的全体信息的需 求。常常被作为数据仓库的过渡，也是数据仓库项目的可选项之一。 1 概述 系统应用集成中一般对各系统中数据分为两类 操作型数据：它有细节化，分散化的特点 决策型数据：它有综合化，集成化的特点 数据仓库概念的提出也把数据处理划分...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值