星型模型和雪花型模型比较

一、概述

在多维分析的商业智能解决方案中,根据事实表和维度表的关系,又可将常见的模型分为星型模型和雪花型模型。在设计逻辑型数据的模型的时候,就应考虑数据是按照星型模型还是雪花型模型进行组织。

当所有维表都直接连接到“ 事实表”上时,整个图解就像星星一样,故将该模型称为星型模型,如图 1 。

星型架构是一种非正规化的结构,多维数据集的每一个维度都直接与事实表相连接,不存在渐变维度,所以数据有一定的冗余,如在地域维度表中,存在国家 A 省 B 的城市 C 以及国家 A 省 B 的城市 D 两条记录,那么国家 A 和省 B 的信息分别存储了两次,即存在冗余。

图1. 销售数据仓库中的星型模型


当有一个或多个维表没有直接连接到事实表上,而是通过其他维表连接到事实表上时,其图解就像多个雪花连接在一起,故称雪花模型。雪花模型是对星型模型的扩展。它对星型模型的维表进一步层次化,原有的各维表可能被扩展为小的事实表,形成一些局部的 " 层次 " 区域,这些被分解的表都连接到主维度表而不是事实表。如图 2,将地域维表又分解为国家,省份,城市等维表。它的优点是 : 通过最大限度地减少数据存储量以及联合较小的维表来改善查询性能。雪花型结构去除了数据冗余。

图 2. 销售数据仓库中的雪花型模型


星型模型因为数据的冗余所以很多统计查询不需要做外部的连接,因此一般情况下效率比雪花型模型要高。星型结构不用考虑很多正规化的因素,设计与实现都比较简单。雪花型模型由于去除了冗余,有些统计就需要通过表的联接才能产生,所以效率不一定有星型模型高。正规化也是一种比较复杂的过程,相应的数据库结构设计、数据的 ETL、以及后期的维护都要复杂一些。因此在冗余可以接受的前提下,实际运用中星型模型使用更多,也更有效率。

二、使用选择

星形模型(Star Schema)和雪花模型(Snowflake Schema)是数据仓库中常用到的两种方式,而它们之间的对比要从四个角度来进行讨论。

  1.数据优化

雪花模型使用的是规范化数据,也就是说数据在数据库内部是组织好的,以便消除冗余,因此它能够有效地减少数据量。通过引用完整性,其业务层级和维度都将存储在数据模型之中。


▲图1 雪花模型

相比较而言,星形模型实用的是反规范化数据。在星形模型中,维度直接指的是事实表,业务层级不会通过维度之间的参照完整性来部署。


▲图2 星形模型

  2.业务模型

主键是一个单独的唯一键(数据属性),为特殊数据所选择。在上面的例子中,Advertiser_ID就将是一个主键。外键(参考属性)仅仅是一个表中的字段,用来匹配其他维度表中的主键。在我们所引用的例子中,Advertiser_ID将是Account_dimension的一个外键。

在雪花模型中,数据模型的业务层级是由一个不同维度表主键-外键的关系来代表的。而在星形模型中,所有必要的维度表在事实表中都只拥有外键。

  3.性能

第三个区别在于性能的不同。雪花模型在维度表、事实表之间的连接很多,因此性能方面会比较低。举个例子,如果你想要知道Advertiser 的详细信息,雪花模型就会请求许多信息,比如Advertiser Name、ID以及那些广告主和客户表的地址需要连接起来,然后再与事实表连接。

而星形模型的连接就少的多,在这个模型中,如果你需要上述信息,你只要将Advertiser的维度表和事实表连接即可。

  4.ETL

雪花模型加载数据集市,因此ETL操作在设计上更加复杂,而且由于附属模型的限制,不能并行化。

星形模型加载维度表,不需要再维度之间添加附属模型,因此ETL就相对简单,而且可以实现高度的并行化。

  总结

雪花模型使得维度分析更加容易,比如“针对特定的广告主,有哪些客户或者公司是在线的?”星形模型用来做指标分析更适合,比如“给定的一个客户他们的收入是多少?”

星型模型模型在交通领域有着重要应用,有助于解决交通数据处理分析中的诸多问题。 ### 星型模型在交通领域的应用 星型模型以一个事实表为中心,周围连接多个维度表,结构简单,查询性能高。在交通领域,可用于交通流量分析。例如,以交通流量数据为事实表,包含车流量、车速等信息;维度表可以有时间维度(年、月、日、小时)、地点维度(路段、路口)、车辆类型维度(轿车、货车、公交车)等。通过这种模型,可以快速分析不同时间、不同地点、不同车辆类型的交通流量情况,为交通规划管理提供依据。比如分析早晚高峰时段特定路段的车流量,以便合理安排交通信号灯时长警力部署。 在交通运营管理方面,星型模型也可用于分析公交运营数据。事实表记录公交车辆的运营信息,如行驶里程、载客量、准点率等;维度表包括线路维度、站点维度、驾驶员维度等。通过该模型可以分析不同线路、不同站点的运营效率,评估驾驶员的工作绩效,从而优化公交线路运营策略。 ### 模型在交通领域的应用 模型星型模型的扩展,维度表可以进一步细分。在交通领域,对于交通设施管理,模型有很好的应用。以交通设施维护数据为事实表,包含设施维修次数、维修费用等信息。维度表可以是设施类型维度(桥梁、隧道、信号灯等),设施类型维度又可以进一步细分为材质维度(混凝土、钢材等)、建设年代维度等。通过这种细分,可以更深入地分析不同类型、不同材质、不同建设年代的交通设施的维护情况,为设施的更新维护提供精准的决策支持。 在交通环境监测中,模型也能发挥作用。事实表记录交通环境数据,如空气质量、噪音水平等;维度表有监测地点维度,监测地点维度可进一步细分为区域维度、道路类型维度等。利用该模型可以分析不同区域、不同道路类型的交通环境状况,为改善交通环境提供详细的信息。 ### 相关案例 在某大城市的智能交通系统中,采用星型模型对城市快速路的交通流量进行分析。通过收集不同时段、不同路段的车流量车速数据,结合时间维度地点维度,分析出了快速路的拥堵规律。根据分析结果,交通管理部门调整了快速路的出入口匝道控制策略,有效缓解了交通拥堵。 某公交公司运用模型管理公交车辆的维修保养数据。将车辆类型维度进一步细分,考虑车辆的制造商、车型等因素,结合维修费用维修次数等事实数据,分析出不同制造商车型的车辆维修成本差异。基于此,公交公司在车辆采购时能够做出更合理的决策,降低了运营成本。 ```python # 以下是一个简单的示例代码,模拟星型模型下交通流量数据的查询 # 假设我们有一个交通流量事实表时间、地点维度表 traffic_fact_table = [ {"time_id": 1, "location_id": 1, "traffic_volume": 100}, {"time_id": 1, "location_id": 2, "traffic_volume": 200}, {"time_id": 2, "location_id": 1, "traffic_volume": 150} ] time_dimension = { 1: "2024-01-01 08:00", 2: "2024-01-01 09:00" } location_dimension = { 1: "路段A", 2: "路段B" } # 查询特定时间地点的交通流量 query_time = 1 query_location = 1 for record in traffic_fact_table: if record["time_id"] == query_time and record["location_id"] == query_location: print(f"在 {time_dimension[query_time]},{location_dimension[query_location]} 的交通流量为 {record['traffic_volume']}") ```
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值