数据表分区解决方案

数据表分区解决方案

问题归纳：

数据仓库根据不同的业务情况数据的量也是不同的。对于数据仓库来说，处理的时候是需要对相应的表进行查询的，因此对查询的优化也就是对整个处理过程的优化。我们一般对那些数据量比较大的度量值表进行按年建表，或者按月建表的方式来优化其查询的速度。但是有时候某些维度表的数据也会非常的多（数据仓库中维度表不能使用分区），或者是已经按月建表的但是每个月的数据量仍然非常大，严重的影响了数据仓库的处理性能。

方案提出：

对那些数据量非常大的表进行分区处理，根据不同的情况按照日期或者ID进行拆分

处理方式：

在新建数据库的时候，建多个文件组，用来存储不同分区函数来分隔的数据，每个文件组分别建多个数据文件，减少I/O的读写。建议每个数据文件不要大于3G。以后可以动态添加数据文件

1、那些按年建的表，按照季度分成4个分区，1