ETL工具

ETL工具Kettle的下载和使用 Kettle最早是一个开源、免费的ETL工具。在2006年,Pentaho公司收购了Kettle项目,从此,Kettle成为企业级数据集成及商业智能套件Pentaho的主要组成部分,Kettle亦重命名为PentahoDataIntegration。PentahoDataIntegration以Java开发,支持跨平台运行,其特性包括支持100%无编码、拖拽方式开发ETL数据管道;可对接包括传统数据库、文件、大数据平台、接口、流数据等数据源;支持ETL数据管道加入机器学习算法。... 阅读详情

一 ETL工具
【国外】

1. datastage
点评:最专业的ETL工具,价格不菲,使用难度一般

下载地址:ftp://ftp.seu.edu.cn/Pub/Develop ... taStage.v7.5.1A-iSO

BT种子下载:http://pan.baidu.com/share/link?shareid=172289&uk=67437475

---------------------------------------

2. informatica
点评:专业程度如Datastage旗鼓相当,价格似乎比Datastage便宜。

Informatica PowerCenter 8.6.1 for Win 32Bit

服务端下载:http://pan.baidu.com/share/link?shareid=183214&uk=67437475
客户端下载:http://pan.baidu.com/share/link?shareid=183217&uk=67437475

Informatica PowerCenter 8.6.0 for Win 32Bit
BT种子下载:http://pan.baidu.com/share/link?shareid=172290&uk=67437475

Informatica PowerCenter 8.1.1 for Win 32Bit
安装包下载:http://pan.baidu.com/share/link?shareid=183201&uk=67437475
---------------------------------------

3. kettle
点评:业界最有名的开源ETL工具。开源当然就免费,免费的有些东西使用就不是很方便。

下载地址:http://kettle.pentaho.com/

---------------------------------------

4. ODI
点评:oracle数据库厂商提供的工具,有局限性,与oracle数据库耦合太深。

下载地址: www.oracle.com/technetwork/cn/testcontent/index-091026-zhs.html

---------------------------------------

5.Cognos

下载地址:http://www.ibm.com/developerworks/cn/downloads/im/cognosbi/

Cognos BI 8.3

BT种子下载: http://pan.baidu.com/share/link?shareid=172287&uk=67437475

Cognos BI 8.4 
BT种子下载:http://pan.baidu.com/share/link?shareid=172288&uk=67437475

------------------------------------------
【国内】
6. beeload
点评: 最好的国产ETL工具,但产品化程度还有一定距离。

下载地址: www.livbee.com
---------------------------------------

二 专业调度工具
有人说: ETL是BI的基础,而调度是ETL的灵魂,可见调度的重要性!
调度原本是ETL技术的一个分支,但这些年, 调度越来似乎有走独立工具的趋势。虽然在ETL工具有调度功能,但与独立调度工具相比,ETL工具的调度就显得很弱了。

【国外】
1. Control-M
点评:你当了大哥太多年,确实有点寂寞。不论是你的规模、价格、使用难度,都很伟大,但我一界平民,你对我只是传说。

官网地址:www.bmc.com

--------------------------------------

【国内】

2. taskctl
点评:调度新秀。专业,而且设计独特、体验友好。易安装、易使用,看好其前景。
下载地址:http://www.taskctl.com/html/2012 ... 8b57714a50a15a.html

--------------------------------------

3. ETS
点评:专业化有待提升
官网地址:http://www.etlschedule.com/

--------------------------------------

4. Moia
点评:产品与项目是有区别的,不要总是在产品化与客户化之间徘徊。
官网地址:http://www.adtec.com.cn/_d271218319.htm
--------------------------------------

5. ETL-Plus
点评:功能全,遗憾的是东南倒塌。
下载地址:[无]
Airflow学习日记 是什么 Airflow是一个可编程、调度和监控的工作流平台。 用户可以定义一组有依赖的任务,即有向无环图 (DAG),按照依赖 五级标题 六级标题 阅读详情

相关推荐

ETL介绍与ETL工具比较

ETL,是英文 Extract-Transform-Load 的缩写,用来描述将数据从来源端经过萃取(extract)、转置(transform)、加载(load)至目的端的过程。ETL一词较常用在数据仓库,但其对象并不限于数据仓库。 ETL负责将分布的、异构数据源中的数据如关系数据、 平面数据文件等抽取到临时中间层后进行清洗、转换、集成,最后加载到数据仓库或数据集市中,成为联机分

Murphyt的专栏 3万+

ETL开发工具Kettle下载安装环境搭建及使用教程(附上Kettle免安装环境)

ETL开发工具Kettle下载安装环境搭建及使用教程(附上Kettle免安装环境)

努力让自己发光,对的人才能迎着光而来 2万+

大数据清洗、转换工具——ETL工具概述

ETL,是英文 Extract-Transform-Load 的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。ETL过程本质上是数据流动的过程,从不同的数据源流向不同的目标数据。

阿拉伯梳子的专栏 3298

ETL是什么,有哪些ETL工具?就业前景如何?

主流的etl工具有Sqoop、DataX、Canal、flume、Logstash、kettle、DataStage、Informatica、Talend等,语言有强悍的SQL、Shell、Python、Java、Scala等。现如今,越来越多的企业开始涉足并重视大数据,各大银行、金融、电信、电力、政府、证券、医院、大学院校及大型制造业等都急需大数据人才。Kettle是一款国外免费开源的、可视化的、功能强大的ETL工具,纯java编写,可以在Windows、Linux、Unix上运行,数据抽取高效稳定。

weixin_54106890的博客 2687

常见的ETL工具优缺点对比

Informatica 优点: 功能强大且全面:提供了大量的转换步骤、脚本功能,能处理各种复杂的ETL转换任务,如多数据源关联、数据清洗、复杂的聚合计算等 。 性能卓越:具有下推优化、缓存查询等提高性能的手段,在处理海量数据时速度快、稳定性高. 企业级支持完善:作为一款成熟的商业软件,有专业的技术支持团队,能为企业提供全方位的服务,保障系统的稳定运行. 错误报告详细:错误报告功能友好,能准确地定位错误发生的位置和原因,帮助开发人员快速解决问题. 监控工具强大:提供了直观且功能丰富的监控工具,可实时监控E

alittlehippo的博客 1922

kettle下载-一款免费开源ETL工具

kettle下载-一款免费开源ETL工具

四种好用的ETL工具

Kettle是一款免费的国外开源ETL工具,使用广泛,是一款目前来看市面上功能最强大的开源ETL工具,通过Kettle可用于数据抽取、转换和加载实现数据快速入仓和分析。(2)Kettle提供了丰富的转换步骤和功能,使用户能够对数据进行清洗、过滤、转换和合并等操作,它支持各种数据处理技术,包括字符串操作、日期处理、聚合计算、条件判断等,以满足复杂的数据转换需求。转换方式主要是进行数据清洗,去除重复值、处理缺失数据,并确保数据一致性和准确性,执行关系型数据的连接、合并、筛选等操作,以整合来自不同源的数据等;

smile6868的博客 5043

ETL工具 nifi2.4.0

ETL工具 nifi2.4.0

8种开源的ETL工具

ETL,是英文 Extract-Transform-Load 的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。ETL 是构建数据仓库的重要一环,用户从数据源抽取出所需的数据,经过数据清洗,最终按照预先定义好的数据仓库模型,将数据加载到数据仓库中去。我们在下方列出了7款开源的ETL工具,并讨论了从 ETL 转向“无 ETL”的过程...

清平乐的技术专栏 9342

ETL-Kettle spoon

进行大数据迁移

开源的ETL工具-kettle7.1

Kettle最早是一个开源的ETL(Extract-Transform-Load的缩写)工具,全称为KDE Extraction, Transportation, Transformation and Loading Environment。后来Kettle重命名为Pentaho Data Integration 。 它由Java开发,支持跨平台运行,其特性包括:支持100%无编码、拖拽方式开发ETL数据管道;可对接包括传统数据库、文件、大数据平台、接口、流数据等数据源;支持ETL数据管道加入机器学习算法。Kettle是一个实现ETL开发的一款开发工具,Spoon是Kettle工具提供的图形化界面。

ETL工具对比

C/S客户端模式,开发和生产环境需要独立部署,任务的编写、调试、修改都在本地,需要发布到生产环境,线上生产环境没有界面,需要通过日志来调试、debug,效率低,费时费力。C/S客户端模式,开发和生产环境需要独立部署,任务的编写、调试、修改都在本地,需要发布到生产环境;DataX是以脚本的方式执行任务的,需要完全吃透源码才可以调用,学习成本高,没有图形开发化界面和监控界面,运维成本相对高。C/S客户端模式,开发和生产环境需要独立部署,任务的编写、调试、修改都在本地,需要发布到生产环境;

Allenzyg的博客 1383

moia-adventure:工作中的MOIA

WorkAdventure Map入门套件 这是一个入门工具包,可帮助您为构建自己的地图。 要了解如何使用该入门工具包,请按照的教程进行操作。

比kettle好用的开源etl_ETL常用的三种工具

ETL,是英文 Extract-Transform-Load 的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。(数据仓库结构)通俗的说法就是从数据源抽取数据出来,进行清洗加工转换,然后加载到定义好的数据仓库模型中去。目的是将企业中的分散、零乱、标准不统一的数据整合到一起,为企业的决策提供分析依据。ETL是BI项目重要的一个环节...

weixin_39526238的博客 7258

Petalinux 2021.2 下 Qt组件编译报错?手把手教你修改bb文件搞定qt3d/qtquickcontrols2

本文详细解析了Petalinux 2021.2环境下Qt组件(如qt3d、qtquickcontrols2)编译报错的解决方案。通过修改bb文件或使用bbappend文件覆盖,有效解决`petalinux-build --sdk`命令执行时的源码获取失败或哈希校验不匹配问题,并提供验证与调试技巧,帮助开发者快速修复构建流程中断问题。

weixin_29188997的博客 216

HyperLPR3车牌识别-Android-SDK光速部署与使用

基于深度学习高性能中文车牌识别 High Performance Chinese License Plate Recognition Framework.快速部署AndroidSDK

tunm 6119

etl常用的三种工具介绍_ETL常用的三种工具

ETL,是英文 Extract-Transform-Load 的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。(数据仓库结构)通俗的说法就是从数据源抽取数据出来,进行清洗加工转换,然后加载到定义好的数据仓库模型中去。目的是将企业中的分散、零乱、标准不统一的数据整合到一起,为企业的决策提供分析依据。ETL是BI项目重要的一个环节...

weixin_26875543的博客 1万+

用户行为数据分析 User Behavior Data from Taobao for Recommendation

一、提出问题 二、理解数据 数据来源 阿里云天池数据集:(https://tianchi.aliyun.com/dataset/dataDetail?dataId=649) 本文选取的数据集为UserBehavior.csv,共有5242880条数据。数据的具体类别如下表所示: 用户行为种类有四种,如下表所示 对于数据维度的说明如下: 在本文选取的2017年11月25日到2017年12月3日的时间范围内,不重复的用户数量为10202,不重复的商品ID数为412369,不重复的商品类目ID数为5859,

cccxxxqq的博客 5206

主流ETL工具调研

2、社区和生态系统:DataX是由阿里巴巴集团开发和维护的项目,有较为活跃的开发者社区和丰富的插件生态系统,可以满足不同的数据同步需求。提取是将关系型数据库和非关系型数据库,以及文件图档数据,第三方接口数据,应用的webhook数据等多种多样的原格式数据抽象出来,形成统一的数据格式先放入缓存区,等待下一步转换操作。(2)Kettle提供了丰富的转换步骤和功能,使用户能够对数据进行清洗、过滤、转换和合并等操作,它支持各种数据处理技术,包括字符串操作、日期处理、聚合计算、条件判断等,以满足复杂的数据转换需求。

xuweilin的博客 2413

Zabbix 7.0 从入门到精通部署手册

zabbix 入门到精通

weixin_43806846的博客 1028

Qt6安装保姆级教程:从国内镜像下载到配置避坑指南(附清华/中科大源)

本文提供详细的Qt6安装与配置指南,重点介绍如何利用清华大学、中国科学技术大学等国内镜像源解决下载速度慢的问题。内容涵盖在线安装器获取、组件选择策略、环境变量配置以及常见编译与部署问题的排查方法,旨在帮助国内开发者高效、顺畅地完成Qt6开发环境搭建。

weixin_29281915的博客 633
上一篇: 一次成功的sql优化,2个表joinI/O 极大,大约9million
下一篇: Ganymed ssh2 连接ftp server获取server的file
wangliwei4321
博客等级 码龄18年 3粉丝 15原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值