qq_33646605的博客

一、介绍 数据仓库主要代表的是一种对数据的管理和使用的方式，它是一整套包括了etl、调度、建模在内的完整的理论体系。是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合。也可以理解为一种思维模式，将数据进行分层，分层之后能让整个数据结构更加清晰。 二、数据仓库分层 1、为什么分层 1）清晰数据结构：每一个数据分层都有它的作用域，我们在使用表的时候能更方便的定位和理解。 2）数据血缘追踪：最终呈现给客户的业务表，来源很多，若有一张来源表出现问题了，能快速的定位到问题，并清楚它的危害范围。

一、redis出现的背景 以索引等为基础的关系型数据库，如mysql，查询并发量最多就上千条；而对大量数据的查询可能达到几十万甚至上百万。 二、redis优势 大量数据查询一般遵循2/8原理，即只有20%的热点数据。只要找到这20%的热点数据并将其放入redis缓存中即可大幅提高查询效率。 三、redis两种模式： 哨兵模式：一个master多个slave，master负责写数据，slave读数据和备份数据。 集群模式：多个master多个slave，一个master至少一个slave，slav