15、Amazon Redshift工作负载管理：WLM、队列与QMR详解

Amazon Redshift工作负载管理：WLM、队列与QMR详解

在数据仓库领域，高效管理查询工作负载是确保性能和资源利用率的关键。Amazon Redshift提供了强大的工作负载管理（WLM）功能，配合队列和查询监控规则（QMR），能有效优化查询执行。本文将深入探讨这些功能，帮助你更好地理解和运用它们。

并发扩展集群

查询在并发扩展集群中完成执行后，后续查询将留在主集群中排队，直到执行。并发扩展限制可以动态更改，无需重启集群。不过，截至目前，并发扩展功能仅在商业区域可用，AWS GovCloud区域暂不支持。

工作负载管理（WLM）

典型组织中有不同类型的用户，对性能有不同期望。Amazon Redshift的WLM功能可根据业务优先级运行工作负载，它能提供必要的控制，以最大化仓库吞吐量，即单位时间内处理的查询数量。

你最多可以定义八个队列，逻辑上隔离正在执行的查询。每个队列都有唯一的服务类标识符，其中1 - 4用于系统，5是超级用户队列，15用于Amazon Redshift的内务活动。

队列分配

Amazon Redshift默认配置只有一个默认队列，所有查询都会在其中执行，除非根据分配规则将查询路由到其他队列。WLM根据以下匹配逻辑为查询分配队列：
1. 如果具有超级用户权限的用户提交查询，且查询组设置为“superuser”，则分配到超级用户队列。
2. 如果普通用户提交查询，且用户组匹配，则分配到匹配的队列。
3. 如果普通用户提交查询，且查询组匹配，则分配到匹配的队列。
4. 如果未找到匹配项，则分配到默认队列。