数据仓库(data warehouse ,DW)
定义
数仓是面向主题的集成的非易失的且随时间变化的数据集合。
主要用于组织积累的历史数据,并使用分析方法(OLAP,数据分析) 进行分析整理,进而辅助决策,为管理者,企业提供数据支持,构建商业智能。
特点
1 面向主题: 根据主题将原始数据集合在一起。
2 集成 原始数据源不用,需要经过ETL转化(清洗, 统一标准 )
3 非易失 : 不允许被修改,只允许查询、分析
4 时变性:数仓 会定期接受。集成新的数据, 从而反映数据的最新变化。
数仓 vs 数据库
数据库面向事物设计,属于OLTP系统,主要操作随机读写,在设计时避免冗余,常采用复合范式规范来设计 ;
数仓是面向主题设计的, 属于OLAP,主要操作批量读写,关注数据整合,以及分析处理性能,会有意引入冗余,采用反范式方式设计;