kettle PDI学习笔记（四）：输出

最新推荐文章于 2025-10-15 16:20:22 发布
原创 最新推荐文章于 2025-10-15 16:20:22 发布 · 408 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#大数据 #etl

本文详细介绍了Kettle PDI中的数据输出操作，包括Excel输出、文本文件输出、SQL输出、表输出、更新、插入更新和删除。通过案例展示了如何配置各个输出步骤，如设置Excel和CSV文件格式，执行SQL更新和插入操作，以及处理数据更新和删除策略。

目录

Excel输出

案例：从mysql输出到xls和xlsx
拉出来表输入和两个输出并配置好表输入，让选择分发/复制，选择复制就好。
Excel输出
Excel输出配置：选择文件、获取字段就ok了
Microsoft Excel输出：扩展名改成xlsx就可以在下边红框打勾了，据说是速度更快，内容里获取字段即可
在这里插入图片描述
运行，ok

文本文件输出

用数据库输出到文本文件，可以回到Excel输出，DB，右击，数据库共享，别的文本文件就不用新建数据库连接，可以直接使用了。（共享之后字体变粗）
在这里插入图片描述

复制两个文本文件输入
在这里插入图片描述
第一个不用怎么改，正常的选择存储位置，获取字段就可以，第二个扩展名改成csv
在这里插入图片描述
ok

最低0.47元/天 解锁文章
PDI(KETTLE)学习笔记
qq_27937101的博客
08-02 4583
PDI（KETTLE）学习笔记简介主要文件组件树介绍转换作业组件生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 简介 一款ETL（Extract-Transform-Load的缩写，即数据抽取、转换、装载的过程）工具...
kettle获取系统日期可变(variable)与固定(fixed)区别
Purplme的博客
01-04 4842
转换如下图 系统日期可变（variable）时： 结果如下：延迟1秒 系统日期固定（fixed）时： 结果如下：无延迟 总结：kettle是多线程执行的，当设置可变时，需要等之前的步骤执行完之后才执行后面的步骤。 ...
kettle输出文本文件名设有系统时间组成的动态文件名.zip
12-28
kettle输出文本文件名设有系统时间组成的动态文件名
第四章 Kettle（PDI）解锁输入输出组件：数据流转的核心枢纽
最新发布
hugejiletuhugejiltu的博客
10-15 860
Kettle作为开源ETL工具，提供了丰富的输入输出组件，支持从文件、数据库等多种数据源高效获取和存储数据。本文重点介绍了文本文件输入组件和数据库输入组件的功能特点、配置步骤及应用案例。文本文件输入组件支持CSV、TXT等多种格式，可灵活配置字段信息；数据库输入组件通过JDBC连接多种关系型数据库，支持SQL查询和参数化操作。通过详细配置说明和销售数据案例，帮助读者快速掌握组件使用方法，为数据处理奠定基础。
kettle 导出上一个月的数据 文件名带上月时间
欢迎....
06-27 2505
sql（文件路径名和上月时间 都是sql完成）： SELECT concat('D:\\a\\b\\表_',DATE_FORMAT( DATE_SUB(CURDATE(),INTERVAL 1 month), '%Y%m' )) as FILENAME, 字段 FROM 表名 where 时间字段>= DATE_FORMAT( DATE_SUB(CURDATE(),INTERVAL...
Kettle下实现Excel数据导入至数据库
热门推荐
QIANG_HAO的博客
04-21 2万+
一、安装kettle 下载地址：https://community.hitachivantara.com/docs/DOC-1009855 1.解压下载下的压缩包，如：pdi-ce-7.1.0.0-12，然后找到.bat批处理文件Spoon双击运行,运行过程中会出现命令提示符,运行成功后如下图所示； 二、配置kettle链接属性 1.主程序启动成功后可能出现如下...
kettle PDI学习笔记（六）：应用
梦回乌托邦
11-09 212
目录替换空值写日志 替换空值 源数据 处理后 写日志 写日志主要在调试的时候使用，把日志信息打印到日志窗口。 红框可以选择日志级别
kettle PDI学习笔记（三）：输入
梦回乌托邦
11-07 566
目录CSV文件输入文本文件输入 CSV文件输入 上回快速入门了一下子，最后输出后，数据格式有点不对劲，源文件数据数字没有小数点，而输出后有了小数点。 打开Excel输出，选择字段的格式，Integer类型的都在格式下拉框选择0就OK了。 注意一下，更改的时候，要把输出的那个文件关掉，不然会报错 文本文件输入 准备个txt id;name;age 1;zhangsan;22 2;lisi;21 3;wangwu;25 新建转换、文本文件输入、Excel输出 ...
kettle PDI学习笔记（十一）：映射
梦回乌托邦
11-09 644
目录映射 映射 映射用来定义子转换，便于封装和重用 映射（子转换）是用来配置转换，对子转换进行调用的一个步骤，比如要在一个转换里边调用另一个转换，这时候就需要用到映射子转换 映射输入规范是输入字段，由调用的转换输入。 映射输出规范是向调用的转换输入所有列，不做任何处理。 例子：从t_orders表获取数据，根据u_id查询t_users表，获取用户信息，存储到Excel。 t_orders表 t_users表 ...
kettle PDI学习笔记（一）：kettle的介绍，下载，目录结构，部署
梦回乌托邦
11-06 922
目录一、ETL二、Kettle简介三、Kettle的结构四、Kettle的核心组件 不慌，我也是刚听说这个词，一脑袋懵 一、ETL 什么是ETL？ETL是三个英文单词的缩写，即数据抽取、转换、装载的过程。对于企业或者行业应用来说，经常会遇到各种数据的处理，转换，迁移，所以掌握一种ETL工具的使用是必须的，Kettle就是ETL工具。 二、Kettle简介 1.Kettle是一款国外开源的ETL工具，纯Java编写的，绿色无需安装，数据抽取高效稳定。 2.Kettle中文：水壶，作者希望把各种数据放到一
Kettle 生成定制日期文本文件名(转载)
java技术专栏
07-05 1475
1.发现kettle3.2，生成文本文件数据时，不能在每行数据后加分隔符。 2.具体改造了org.pentaho.di.trans.steps.textfileoutput包TextFileOutput类中       private void writeRowToFile(RowMetaInterface rowMeta, Object[] r) throws KettleSte...
kettle文本文件输出文件名为有系统时间组成的动态名
12-06
kettle文本文件输出文件名为有系统时间组成的动态名
kettle系统信息输出的日期_Kettle 生成定制日期文本文件名(转载)
weixin_42356378的博客
01-14 1165
1.发现kettle3.2，生成文本文件数据时，不能在每行数据后加分隔符。2.具体改造了org.pentaho.di.trans.steps.textfileoutput包TextFileOutput类中private void writeRowToFile(RowMetaInterface rowMeta, Object[] r) throws KettleStepException{try{i...
《Kettle实操案例三（生成日期/月份序列，固化历史数据）》
weixin_42924611的博客
02-08 1421
对历史合同数做每月固化，历史合同数=count(合同id，where合同日期<=当月)，通过etl过程输出从2000年-2019年的每个月历史的合同总数。获取上个月最后一天的系统信息，传入SQL，获取在上个月最后一天之前的合同数量，存入目标表。表格:日期表DATE_TIME 两个字段 date(日期),id（合同id）因为是计算2000年到2019年的数据，所以过滤数据，确保最大日期在此之前。因为是计算2000年到2019年的数据，值设置为2000-01。结果表 三个字段:年月，历史合同数，日期标志位。
KETTLE 读取文本信息添加时间字段
qq_36688928的博客
06-12 3360
转换：https://blog.youkuaiyun.com/care_about_people/article/details/44960193 KETTLE 读取文本信息添加时间字段:https://blog.youkuaiyun.com/Care_about_people/article/details/44960193 kettle从数据库添加要求指定的日期内的数据，并且时间实现自增模式:https...
Kettle-表输入-表输出
木卫二号的专栏
03-15 2764
各创建相同结构表，一张表中有数据。
kettle从插入表中根据sql获取字段
L990616_ss的博客
12-02 2776
kettle做一个简单的输入表，有这些字段： 做一个简单的连接： 输出表中可以选择字段： 该字段是从输入表中来的，并且是根据输入表中的sql来的，输入表中SQL少写一个字段或者写错SQL都是没有的。 我要做的是在Springboot中集成kettle，由前端输入sql语句，便能获取到他sql语句中的所有字段。上网找了一下，并没有找到方法，今天早上来摸索了一下，终于是摸索出来了。 基于：SpringBoot集成Kettl...
KETTLE中的Excle输出
AnameJL的博客
11-21 1805
KETTLE中的Excle输出 核心对象 --> 输出 --> Excel表输出，将Excel输出拖入到转换页面中，或者双击都可以。 双击”Excel输出”，在”Excel输出”窗口中进行参数的配置，这里最好将扩展名中默认填写的xls去掉，如果不去掉在生成文件会是以“file.xls.xls”形式呈现 在”文件名”可以选择文件的存储路径，然后点击保存即可 可以在”内容”中设置编码格式，Sheet表名等，在”格式”中设置字体等一些相关配置，如下图 这里的参数配置根据个人的需求来定，这里写
kettle-根据时间升序导出csv文本数据文件
努力改变人生
03-01 441
1、获取上一次同步时间最新时间(作为下一个步骤参数值) 2、按时间升序获取一定量的数据 3、导出文本文件 4、获取本次同步数据最新创建时间 5、将获取到的变量值映射成数据库字段 6、添加数据至数据库中 附完整图： ...
Kettle 5.1.0学习笔记：ETL工具详解与案例
"Kettle是一款开源的ETL工具，用于数据抽取、转换和加载，尤其在数据仓库构建中发挥重要作用。Kettle支持多种操作系统，并通过转换(ktr)和作业(kjb)文件进行工作。ETL过程包括从源抽取数据、进行转换处理、最后加载...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值