数据抽取清洗转换加载工具ETL

本文介绍如何使用ETL工具完成数据从一个数据库到另一个数据库的迁移工作。具体包括工具的下载、配置过程,并演示了简单的数据抽取及插入操作。

应用场景

当你想通过工具,从一个数据库将数据进行清洗后搬迁到另一个数据库,那么就可以通过ETL的数据抽取清洗转换加载工具来操作。

操作步骤

1. 工具下载

kettle文件下载,解压即可用:
下载地址

2. 配置

首先我们了解下Epoint-DI能做什么?
一般我在项目中数据抽取一般都是自己写定时任务,通过quartz或者其他任务调度框架来定时从数据源中抽取数据,所有有关数据的抽取、校验、转换等过程都是在代码中手工编写,针对不同的数据源都是需要手动来编写代码,然后重新发布数据抽取程序。但是通过DI就可以实现配置的方式来创建定任务调度,数据的抽取、校验、转换等过程。并且支持多种数据的输入、输出方式,有完善的过滤组件,数据处理组件等。


简单的数据推送
创建一个输入组件、一个输出组件即可。负责抽取和插入数据。

这里写图片描述

表输入:

这里写图片描述

表输出:

这里写图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值