29、亚马逊红移数据仓库迁移与监控全解析

亚马逊红移数据仓库迁移与监控全解析

数据仓库迁移至亚马逊红移

在当今数据量飞速增长的时代，传统本地数据仓库架构僵化，难以满足现代大数据分析的需求，且搭建和运营成本高昂。而亚马逊红移能够助力用户分析所有数据，实现任意规模下的高性能，同时成本低廉且可预测。在将数据仓库迁移至亚马逊红移时，需要综合考虑数据仓库的总规模、数据变更率以及数据转换复杂度等因素，从而选择合适的迁移策略和流程，以降低迁移项目的复杂度和成本。

迁移流程

1. 增量加载 ：这一阶段也被称为变更数据捕获（CDC）阶段、增量加载阶段或持续复制阶段。CDC 是一种捕获数据库变更并确保这些变更复制到目标（如数据仓库）的过程。在此步骤中，可以使用 AWS DMS 或 AWS SCT，有时甚至可以使用源数据仓库的原生工具，将这些增量变更从源捕获并加载到 Amazon Redshift。
2. 迁移行动总结 ：迁移过程涵盖评估、迁移、验证以及退役与保留等方面，具体内容如下表所示：
   | 评估 | 迁移 | 验证 | 退役与保留 |
   | — | — | — | — |
   | 初始数据迁移 | 架构验证 | 迁移范围 | 持续变更复制 |
   | 数据可用性 | 迭代迁移 | 持续变更验证 | ETL 工具 |
   | 架构转换 | 业务验证 | 数据移动选项 | 数据库迁移服务 |
   | 切换 | 迁移评估报告 | AWS Snow 设备 | |

迁移工具与最佳实践

为了提升和加速数据仓库向 Amazon Redshift 的