10、T-SQL 数据转换、清理与规范化操作指南

T-SQL 数据转换、清理与规范化操作指南

在数据处理过程中，我们常常需要对数据进行转换、清理以及规范化操作，以确保数据的质量和可用性。本文将详细介绍如何使用 T-SQL 完成这些任务，包括使用 MERGE 语句结合 CHECKSUM 函数处理数据变更，利用临时表跟踪数据变化，以及通过高水位标记技术进行数据加载，最后还会探讨数据的规范化和反规范化操作。

1. 使用 OUTPUT 子句捕获数据变更

OUTPUT 子句的结果可以通过 INTO 子句捕获到一个表中。以下是使用 OUTPUT 子句的示例代码：

CREATE TABLE #changes (Id int, Discontinued bit, WhatHappens nvarchar(10))
MERGE ...
OUTPUT inserted.Id, inserted.Discontinued, $action as WhatHappens INTO #changes;

在探索结果集时，我们发现即使记录没有发生变化，两个表中存在的每条记录都会被更新，这显然是低效的。为了解决这个问题，我们可以使用 CHECKSUM 函数来判断哪些记录实际发生了变化。

2. CHECKSUM 函数的使用

CHECKSUM 是一个针对其参数计算整数值的函数，对于传入的参数，其结果值是唯一的。以下查询展示