25、现代ETL解决方案与数据质量处理

现代ETL解决方案与数据质量处理

1. 现代ETL解决方案关键组件设置

1.1 ETL.Staging项目框架对象设置

在现代ETL解决方案中，为SSIS项目设置框架对象是很重要的。以下是具体步骤：
1. 打开解决方案，展开ETL.Staging SSIS项目，选择EP_Staging.dtsx包并打开。
2. 导航到事件处理程序选项卡，从下拉列表中选择OnPreExecute事件处理程序，点击超链接创建该事件处理程序。
3. 在变量面板中，注意到包中有一个名为LoadExecutionId的变量，它将保存OPenLoadExecution存储过程调用返回的值。从SSIS工具箱中拖放一个执行SQL任务到设计器表面，命名为sql_OpenLoadExecution。
4. 双击SQL任务（或右键单击并选择编辑），在“常规”选项卡上设置以下属性：
- ResultSet：从下拉列表中选择None（默认值）。
- Connection：从下拉列表中选择cmgr_DW。
- SQLStatement：输入 EXECUTE [SystemLog].[OpenLoadExecution] ?,?,? OUTPUT 。
5. 点击执行SQL任务编辑器左侧列表中的“参数映射”选项卡，添加以下参数：
|参数序号|变量名|方向|数据类型|参数名|参数大小|
| ---- | ---- | ---- | ---- | ---- | ---- |
|1|System::ServerExecutionID|Input|Long|0|-1|
|2|$Project::Load