数据仓库术语

大数据之数据仓库 数据库(Database)是按照数据结构来组织、存储和管理数据的建立在计算机存储设备上的仓库。数据库是长期储存在计算机内、有组织的、可共享的数据集合。数据库的数据指的是以一定的数据模型组织、描述和储存在一起、具有尽可能小的冗余度、较高的数据独立性和易扩展的特点并可在一定范围内为多个用户共享。常用的数据库有 MySQL、ORACLE、SQL Server 等。1.2 什么是数据仓库数据仓库是决策支持系统(dss)和联机分析应用数据源的结构化数据环境。数据仓库研究和解决从和数据库中获取信息的问题。 阅读详情

数据仓库:数据仓库是一个支持管理决策的数据集合。数据是面向主题的、集成的、不易丢失的并且是时间变量。数据仓库是所有操作环境和外部数据源的快照集合。它并不需要非常精确,因为它必须在特定的时间基础上从操作环境中提取出来。

数据集市:数据仓库只限于单个主题的区域,例如顾客、部门、地点等。数据集市在从数据仓库获取数据时可以依赖于数据仓库,或者当它们从操作系统中获取数据时就不依赖于数据仓库。

事实:事实是数据仓库中的信息单元,也是多维空间中的一个单元,受分析单元的限制。事实存储于一张表中(当使用关系数据库时)或者是多维数据库中的一个单元。每个事实包括关于事实(销售额,销售量,成本,毛利,毛利率等)的基本信息,并且与维度相关。在某些情况下,当所有的必要信息都存储于维度中时,单纯的事实出现就是对于数据仓库足够的信息。我们稍后讨论有关缺无事实的情况。

维度:维度是用来反映业务的一类属性,这类属性的集合构成一个维度。例如,某个地理维度可能包括国家、地区、省以及城市的级别。一个时间维度可能包括年、季、月、周、日的级别。

级别:维度层次结构的一个元素。级别描述了数据的层次结构,从数据的最高(汇总程度最大)级别直到最低(最详细)级别(如大分类-中分类-小分类-细分类)。级别仅存在于维度内。级别基于维度表中的列或维度中的成员属性。

数据清洗:对数据仓库系统无用的或者不符合数据格式规范的数据称之为脏数据。清洗的过程就是清除脏数据的过程。

数据采集:数据仓库系统中后端处理的一部分。数据采集过程是指从业务系统中收集与数据仓库各指标有关的数据。

数据转换:解释业务数据并修改其内容,使之符合数据仓库数据格式规范,并放入数据仓库的数据存储介质中。数据转换包括数据存储格式的转换以及数据表示符的转换(如产品代码到产品名称的转换)。

联机分析处理(OLAP Online Analytical Processing ):OLAP是一种多维分析技术,用来满足决策用户在大量的业务数据中,从多角度探索业务活动的规律性、市场的运作趋势的分析需求,并辅助他们进行战略发展决策的制定。按照数据的存储方式分OLAP又分为ROLAP、MOLAP和HOLAP。在客户信息数据仓库CCDW的数据环境下,OLAP提供上钻、下钻、切片、旋转等在线分析机制。完成的功能包括多角度实时查询、简单的数据分析,并辅之于各种图形展示分析结果。

数据挖掘:在数据仓库的数据中发现新信息的过程被称为数据挖掘,这些新信息不会从操作系统中获得。

切片:一种用来在数据仓库中将一个维度中的分析空间限制为数据子集的技术。

切块:一种用来在数据仓库中将多个维度中的分析空间限制为数据子集的技术。

星型模式:是数据仓库应用程序的最佳设计模式。它的命名是因其在物理上表现为中心实体,典型内容包括指标数据、辐射数据,通常是有助于浏览和聚集指标数据的维度。星形图模型得到的结果常常是查询式数据结构,能够为快速响应用户的查询要求提供最优的数据结构。星形图还常常产生一种包含维度数据和指标数据的两层模型。

雪花模式:指一种扩展的星形图。星形图通常生成一个两层结构,即只有维度和指标,雪花图生成了附加层。实际数据仓库系统建设过程中,通常只扩展三层:维度(维度实体)、指标(指标实体)和相关的描述数据(类目细节实体)超过三层的雪花图模型在数据仓库系统中应该避免。因为它们开始像更倾向于支持OLTP 应用程序的规格化结构,而不是为数据仓库和OLAP应用程序而优化的非格式化结构。

粒度:粒度将直接决定所构建仓库系统能够提供决策支持的细节级别。粒度越高表示仓库中的数据较粗,反之,较细。粒度是与具体指标相关的,具体表现在描述此指标的某些可分层次维的维值上。例如,时间维度,时间可以分成年、季、月、周、日等。

数据仓库模型中所存储的数据的粒度将对信息系统的多方面产生影响。事实表中以各种维度的什么层次作为最细粒度,将决定存储的数据能否满足信息分析的功能需求,而粒度的层次划分、以及聚合表中粒度的选择将直接影响查询的响应时间。

度量值:在多维数据集中,度量值是一组值,这些值基于多维数据集的事实数据表中的一 列,而且通常为数字。此外,度量值是所分析的多维数据集的中心值。即,度量值是最终用户浏览多维数据集时重点查看的数字数据(如销售、毛利、成本)。所选择的度量值取决于最终用户所请求的信息类型。

4. 关系型数据库-术语 数据库术语Database、Table、Schema、Index、Primary Key、Foreign Key、Query、Transaction等。 阅读详情

相关推荐

数据仓库基础术语名词一览

冰山查询――iceberg query  在数据仓库领域有一个概念叫Iceberg query,中文一般翻译为“冰山查询”。冰山查询在一个属性或属性集上计算一个聚集函数,以找出大于某个指定阈值的聚集值。 以销售数据为例,你想产生这样的一个顾客-商品对的列表,这些顾客购买商品的数量达到3件或更多。这可以用下面的冰山查询表示: Select        P.cust_ID, P.item_ID

nisjlvhudy的专栏 5969

数据仓库术语整理

一、度量、指标、指标器 度量和维度构成OLAP的主要概念,对于在事实表或者一个多维立方体里面存放的数值型的、连续的字段,就是度量。这符合上面的意思,有标准,一个度量字段肯定是统一单位,例如元、户数。如果一个度量字段,其中的度量值可能是欧元又有可能是美元,那这个度量没法汇总。在OLAP中还有计算度量的说法,用一个总费用除以用户数,得到每户平均费用。但这究竟还算不算度量了呢?这已经不是原本意义上的度...

戰士博客 2359

数据库基本术语合集SQL,DQL,DML

文章目录数据库基本术语合集及解释1、数据库DB (DataBase)2.数据库管理系统DataBase Management System(DBMS)3.数据库的三级模式4.外键和主键5.SQL(Structure Query Language)结构化查询语言6.DQL(data query language)数据查询语言7.DML(data manipulation language)数据操作语言8.DDL(data defination language)数据库定义语言9.DCL(data contro

secret の bolg 3041

什么是数据仓库

数据仓库(Data WareHouse)是面向主题的、集成的、相对稳定的、反应历史变化的数据集合,它可为企业制定决策、提供数据支持,帮助企业改进业务流程、提高产品质量等。 ...

m0_51697147的博客 187

68、数据库术语详解

本博客详细介绍了数据库领域的核心概念与术语,涵盖分布式数据库的设计目标、客户端类型、数据组织与存储方式、数据规范化、数据关系与约束、数据提取与更新策略、数据查询与操作方法、并发控制与恢复机制、数据仓库与分析工具、对象与关系映射、事务管理、数据建模与设计、元数据与信息管理以及其他重要数据库概念。通过深入探讨这些主题,帮助读者更好地理解和应用数据库技术,提高数据管理和使用效率,以支持企业的决策制定与业务发展。

kk1234的博客 65

Fluent求解器——湍流参数的设置

Fluent湍流参数的介绍和设置。

Ronko_G的博客 4万+

数据仓库 Data warehouse

数据仓库产生背景 大规模数据被存储在数据库中,一些非热点数据需要我们对其进行处理计算,根据这些数据得出一些我们在某个时间段或某个背景下想要得到的数据。 一、数据处理方式 1.1 OLTP(On-line Transaction Processing),联机事务处理 具有事务的特性,常用来处理高并发且数据量不大的查询。OLT主要是为了处理数据库,用于优化查询和负载,常见的优化在于主码索引和散列 1.2 OLAP(On-line analytical Processing)联机分析处理 OLAP则是

m0_61332144的博客 1389

ANSYS Sherlock新手避坑:从ODB++文件导入到属性匹配的完整流程(附官方教程路径)

本文详细解析了ANSYS Sherlock从ODB++文件导入到属性匹配的完整流程,帮助新手避开常见陷阱。内容包括环境准备、官方教程使用技巧、ODB++导入关键检查点、属性验证策略及常见报错解决方案,特别强调了路径设置和材料匹配的重要性,提升仿真效率。

weixin_42519781的博客 457

数据仓库常用名词汇总

数仓为了支撑企业或组织的决策和业务分析,而从各个业务系统中抽取数据集成到一个数据存储中心,这样的数据存储中心称为数据仓库(Data Warehouse),而在搭建数据仓库时,通常会采用一些命名规范,常见的有:ods、dim和dws。 1. ODS:ODS全称是Operational Data Store,即运营数据存储层,是数据仓库中的一层,主要用于存储来自源系统的数据,该层保留着与业务相关的行为数据,通常不对数据进行聚合处理,也不进行数据清洗和格式转换。ODS主要是为数据仓库提供数据源。

dkjhl的博客 2584

武汉理工大学 python实验三

请编一个程序,用户在同一行内输入两个整数,代表头和脚的数量,编程计算笼中各有多少只鸡和兔(假设鸡和兔都正常,无残疾),如无解则输出`“Data Error!题目为:今有物不知其数,三三数之剩二,五五数之剩三,七七数之剩二,问物几何?年前,《孙子算经》中记载一个有趣的问题:今有雉兔同笼,上有三十五头,下有九十四足,问雉兔各几何?有一座八层宝塔,每一层都有一些琉璃灯,每一层的灯数都是上一层的二倍,已知共有。编写一个宝塔上的琉璃灯的小程序,计算并输出每层各有多少盏琉璃灯。,如果有多个解,则分行输出,每行一个解;

2401_83472225的博客 5950

Autodesk全家桶安装总报错1603?一个服务设置搞定3dsMax和CAD安装回滚问题

本文详细解析了Autodesk全家桶安装过程中常见的1603错误,特别是3ds Max和CAD安装回滚问题。通过调整AdskLicensingService服务的账户权限,提供四步修复法和安装流程优化策略,帮助用户彻底解决安装难题,提升Autodesk软件的安装成功率。

weixin_30955617的博客 1132

Artificial-Intelligence-Terminology-Database术语编译标准详解:从常见术语到歧义术语的处理方法

Artificial-Intelligence-Terminology-Database(人工智能术语数据库)是一个全面的人工智能领域中英技术词汇映射数据库,旨在为AI领域的研究者、开发者和学习者提供准确、统一的术语参考。本文将详细解析该数据库的术语编译标准,包括常见术语的标准化处理、歧义术语的解决方法以及编译流程中的核心原则,帮助用户更好地理解和使用这份宝贵的AI术语资源。 ## 术语编译的核

gitblog_00003的博客 1003

13、基于RBF的自适应鲁棒控制与反步控制方法及实现

本文介绍了基于RBF神经网络的自适应鲁棒控制与反步控制方法,详细阐述了控制系统的程序结构、核心算法及实现流程。通过Simulink搭建仿真系统,利用RBF网络逼近系统中的不确定非线性函数,并结合Lyapunov稳定性理论设计控制律,实现了对倒立摆等复杂非线性系统的高精度跟踪控制。文章还提供了完整的MATLAB/Simulink代码示例和仿真结果分析,验证了该方法的有效性与鲁棒性,为实际工程应用提供了可行的技术路径。

ol789012的博客 92

Terminology Database确保术语统一

术语数据库(TDB)是解决技术术语混乱的核心工具,支持术语的采集、审核、存储与集成,提升文档一致性、翻译准确率和团队协作效率。通过结构化管理和系统集成,TDB不仅降低沟通成本,还为AI与知识图谱提供高质量数据基础。

weixin_35649491的博客 333

03 Token、Embedding、上下文窗口:开发者必须懂的三个基本概念

Token、Embedding 和上下文窗口是大模型应用开发的三个基础概念。本文从成本、速度、检索和上下文设计四个角度讲清它们的工程意义,帮助开发者理解为什么同一段内容会超限、变贵,为什么 RAG 能做语义检索。

老于的笔记的专栏 413

高通Camx相机防抖分析分析一:概率性EIS防抖功能失效

摘要:文章分析了高通Camx平台EIS电子防抖失效问题。通过日志排查发现NCS服务在启动时出现gyro传感器探测超时(error 9),导致无法获取陀螺仪数据。虽然sensor模块上电和注册正常,但由于性能问题触发了超时机制。解决方案是增大QSEEConnectionTimeout阈值,经测试有效解决了该问题。后续文章将继续深入相关技术专题。

629

数据仓库术语一览

http://blog.youkuaiyun.com/foxnet2003/archive/2005/09/15/481830.aspx数据仓库:数据仓库是一个支持管理决策的数据集合。数据是面向主题的、集成的、不易丢失的并且是时间变量。数据仓库是所有操作环境和外部数据源的快照集合。它并不需要非常精确,因为它必须在特定的时间基础上从操作环境中提取出来。  数据集市:数据仓库只

oracel数据库、数据仓库、JAVA开发的专栏 969

LeetCode 面试经典 150 题回顾

最经典 150 题,掌握面试所有知识点 面试经典 150 题 : 题目分析、解题思路、复杂度分析、代码展示

曾经“等你生日那天”都遥远得像未来,如今却可欢愉的挥手说“下个十年见” 8万+

SQL数据库-------专业术语学习

也称为面向交易的处理过程,其基本特征是前台接收的用户数据可以立即传送到计算中心进行处理,并在很短的时间内给出处理结果,是对用户操作快速响应的方式之一

qq_43514659的博客 3256

数学建模模型总结

这是本人在两年内准备参加数学建模竞赛搜集到的模型资料,已经经过了本人的筛选和整理,希望能够对准备参加数学建模竞赛的学弟学妹们提供一些帮助!

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

这些主流数据库常用专业术语,你都知道么

汇总了51个数据库术语列表,作为数据库开发人员,你需要知道这些专业术语。在阅读数据库相关文档或专业领域书籍时,会经常见到。

陈哈哈的菜园子 2万+

VC中sqlite的使用

在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示

Artificial-Intelligence-Terminology-Database核心价值:为什么这个术语库对AI研究如此重要?

Artificial-Intelligence-Terminology-Database(简称AITD)是一个全面的人工智能领域中英文技术词汇映射数据库,目前已收录约2442个专业术语及2个专项领域篇,为AI研究者和学习者提供了统一、准确的术语参考标准。 ## 打破AI术语的"巴别塔"困境 在快速发展的人工智能领域,术语不统一已成为知识传播和跨学科协作的主要障碍。同一个英文术语往往存在多种中文

gitblog_01075的博客 787

WINCC7.3破解文件

WINCC7.3硬件够破解文件,有需要的下载!WINCC7.3硬件够破解文件,有需要的下载!

快速了解数据仓库及数据建模的常用新术语

数据仓库引入了新的术语,扩展了数据建模的术语表。为使本文的阐述能够完备,下面我介绍一下最常用的术语。   ◆数据仓库   数据仓库是一个支持管理决策的数据集合。数据是面向主题的、集成的、不易丢失的并且是时间变量。   数据仓库是所有操作环境和外部数据源的快照集合。它并不需要非常精确,因为它必须在特定的时间基础上从操作环境中提取出来。   ◆数据集市   数据仓库只限于单个主题...

abc123098098的博客 163

揭秘Artificial-Intelligence-Terminology-Database:周志华、李航等权威专家如何统一术语翻译?

Artificial-Intelligence-Terminology-Database是一个全面的人工智能领域中英文技术词汇映射数据库,目前拥有约2442个专业术语和2篇专项领域篇,主要涵盖人工智能领域的基础概念和术语。该项目旨在为社区提供具有统一性的AI及相关领域中英术语翻译对照参考,解决AI术语翻译混乱的问题。 ## 🌟 术语库的诞生:从日常积累到专家参与 ### 🔍 术语库的发展历

gitblog_00630的博客 1112

数据库术语

MYSQL;数据库管理系统(不是数据库) DATA:数据 DB:Database数据库 DBS:Database System数据库系统 DBMS:数据库管理系统Database Management System RDMS:关系数据库管理系统Relational Database Management System DBA:数据库管理员Database Administrator ...

C++初学者 327

数据仓库相关术语

指一种扩展的星形图。退化维度,就是那些看起来像是事实表的一个维度关键字,但实际上并没有对应的维度表,就是维度属性存储到事实表中,这种存储到事实表中的维度列被称为退化维度。实体表就是一个实际对象的表,实体表放的数据一定是一条条客观存在的事物数据,比如说各种商品,它就是客观存在的,所以可以将其设计一个实体表。特别需要指出的是,由于对结果的标注也是一种标签,所以在自然语言处理和机器学习相关的算法应用场景下,标签对于监督式学习有重要价值,只是单纯的指标难以做到的。数据是面向主题的、集成的、不易丢失的并且是时变的。

jane9872的博客 1385
上一篇: RIATest Flex测试
下一篇: JAVA实现压缩文件或文件夹
terryzero
博客等级 码龄19年 700粉丝 232原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值