kettle-Excel输入

最新推荐文章于 2023-11-07 11:33:50 发布
转载 最新推荐文章于 2023-11-07 11:33:50 发布 · 248 阅读 · 0 ·
CC 4.0 BY-SA版权
原文链接：http://www.cnblogs.com/LXL616/p/10836237.html

该博客转载自https://www.cnblogs.com/LXL616/p/10836237.html ，主要涉及kettle中Excel输入相关内容，但原文未提供更多详细信息。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

 

 

 

 

 

 

 

 

 

 

 

 

转载于:https://www.cnblogs.com/LXL616/p/10836237.html

kettle从入门到精通 第五十五课 ETL之kettle Excel输入
zhangjin1222的博客
04-30 1852
失败的记录数文件目录：翻译：如果发生行解析错误，请指定放置错误的目录位置。Excel 2007 XLSX（Apache POI）：如果您选择这种电子表格类型，您可以读取所有已知的Excel文件类型。注意：如果您使用了受密码保护的工作表，您必须将电子表格类型（引擎）设置为Excel 2007 XLSX（Apache POI）。正则表达式（排除）：如果上方指定的是目录，这里指定一个正则表达式来排除指定目录中的文件名。正则表达式：如果上方指定的是目录，这里指定一个正则表达式来匹配指定目录中的文件名。
【使用kettle实现excel输入table输出数据转换】
小强没烦恼的博客
07-19 1746
ETL：【extract：提取，提炼】Extract-Transform-Load的缩写，即数据抽取、转换、装载的过程，对于企业或行业应用来说，我们经常会用到各种数据的处理，转换，迁移，市面上常用的ETL工具有很多，比如Sqoop、DataX、Kettle，Talend等，此处介绍一下kettle的基本操作以及使用。启动后点击文件新建转换，在输入中拖拽"excel输入"，在转换中拖拽"字段选择"，在输出中拖拽"表输出"，在应用中拖拽"写日志"，使用shift+左键连接各个组件，组成下面的流程。
[Kettle] Excel输入
Hudas的博客
11-07 3723
本文主要讲解Kettle中的"Excel输入"组件相关知识点
Spoon Kettle 输入之 excel 输入详解（Microsoft Excel input）
鱼丸丶粗面
09-01 4740
Spoon Kettle 输入之 excel 输入详解（Microsoft Excel input）
KETTLE——EXCEL输入
Jweilai
01-23 5338
KETTLE表输出使用KETTLE表输出KETTLE EXCEL输入功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 ...
Kettle - Spoon - 4.1.0 操作手册
03-16
《Kettle Spoon 4.1.0 操作手册》提供了全面的指南，帮助用户了解和掌握Pentaho Data Integration（通常称为Kettle或Spoon）的使用，这是一款强大的ETL（提取、转换、加载）工具。ETL是数据处理的关键部分，用于从不...
Kettle之Excel输入的简单使用
gdyuan的博客
04-30 5846
Kettle之Excel输入的简单使用 目的：将Excel中的数据导入到指定的数据库中。本文章将通过一个示例介绍Excel输入组件的使用方法。 工具： Kettle Oracle或其他数据库 方法： 一、准备Excel内容，如图所示： 二、在Kettle中新建 --> 转换，在核心对象中选择输入文件夹中的Excel输入，鼠标拖拽右侧空白处。 三、双击该Excel输入组件 1.在文件选项卡中，选择Excel使用的表格类型，如果类型选的不对，后面预览的时候就不会出来预览数据。 2.点击浏览，根据E
Kettle-如何判断Excel某列出现过并且判断
ShanDing_Blog
12-13 1067
如何判断 Excel表格中 某行出现过某条数据之后 影响之后的数据 举例 我想把 光租船，分包船，后面数据，新建一列，再进行分别赋值。 首先再Excel输入中 把行号列引入 之后使用JS代码进行操作 if(rn==1){ setVariable('XXXXX',0,'r'); } var aca = getVariable('XXXXX',0); if(序号 == "分包船作业统计："){ aca = -1; setVariable('XXXXX'...
Kettle Excel 输入输出
杨海吉
11-27 2316
Kettle 实现 Excel的输入输出，干货满满，绝对的零基础教程
Kettle 简单示例(数据库表到输出到Excel)
03-31
Kettle 简单示例(数据库表到输出到Excel) 简单示例,用于练习
《示例学习kettle之Excel Writer步骤》博客文章示例
09-16
《示例学习kettle之Excel Writer步骤》博客文章示例代码，很好的Excel Writer步骤学习资料。
大数据 Excel 通过 Kettle 进行数据清洗
12-05
大数据Excel通过Kettle 穿插javascript进行数据清洗 在将数据导入Excel里
kettle案例7-Excel输入
勇气与行动
10-26 402
数据来源： 把这些数据拷贝到excel表格中，生成一个文件，“物理成绩.xls” 序号 学号 班级 物理 考试时间 1. 201709001. 1班 96. 2018/6/27 14:30 2. 201709002. 1班 97. 2018/6/27 14:30 3. 201709003. 1班 82. 2018/6/27 14:30 4. 201709004. 1班 78.
Kettle使用_4 Excel批量数据输入
数据科学汇集
04-21 3885
需求：批量导入格式统一的excel文件到表中解决方法:借助Excel输入和正则表达式以及表输入组件完成该功能1)拖个Excel输入组件并按照下图示意操作： 2)拖个表输出组件并按照下图示意操作： 3)完整示意： ...
Kettle入门操作——输入流（表输入、excel）详细
weixin_30409849的博客
11-23 1303
　　1、表输入，允许简易转换：大字段的延迟转换(延迟转换性能更高，采用byte方式处理，否则就是string方式) 替换sql语句里的变量：job作业中的变量替换为语句中的变量 　　　　　　 　　2、变量的引用 　　　　引用形式：　SELECT id, name FROM zdy_test where id=${i}...
JAVA调用KETTLE——以excel数据入库为例
荣光的博客
05-09 7867
通过JAVA调用kettle的ktr文件，实现解析excel，并将kettle处理好的数据进行入库。
KETTLE中Excel表输入
AnameJL的博客
11-11 3717
KETTLE中Excel表输入 在选定好Excel文件输入功能模块后，我们将其拖入到转换页面当中 双击Excel输入，进入到参数的配置界面 在这配置页面我们可以看到有Excel文件的版本选项，和路径选项，下方的正则表达式，可以用来匹配一个路径下所有符合条件的文件，这个看个人的需求使用，在选择表格类型的时候一定要选择正确，不然是读不到文件的。 在填写完表格类型、文件或目录后，点击增加即可，就会在选择的文件那里出现你所要操作的表格 完成上步操作后，在点击上方的工作表，然后点击获取表名，会出现如下界面
ETL工具 - Kettle 输入输出算子介绍
小毕超博客
04-30 3189
上篇文章对Kettle进行了简单的介绍及做了个简单的案例，但是对Kettle的Step算子工具没有做过多的解释，本篇文章从输入输出算子工具开始进行介绍。ETL工具 - Kettle 介绍及基本使用输入是转换里面的第一个分类，用来完成ETL中的E抽取数据或者生成数据。在Kettle。
kettle 9.3 excel输入如何使用相对路径
最新发布
06-26
<think>我们正在讨论Kettle9.3中Excel输入步骤使用相对路径的问题。根据用户的问题，他之前遇到了在ExcelVBA中相对路径被识别为绝对路径的问题，但现在转向了Kettle环境。因此，我们需要提供在Kettle中处理相对路径的方法。在Kettle中，相对路径通常基于当前作业或转换所在的目录。但是，Kettle的Excel输入步骤默认要求文件的完整路径。为了使用相对路径，我们可以通过以下方式：1.**使用Kettle变量**：我们可以定义变量来表示相对路径，然后在Excel输入步骤中使用这些变量。2.**通过“设置变量”步骤**：在转换开始时设置变量，例如当前转换的目录。3.**使用“获取系统信息”步骤**：可以获取当前转换或作业的目录路径，然后基于此构建相对路径。特别地，在Kettle中，有一个内置变量`${Internal.Entry.Current.Directory}`，它表示当前转换或作业文件所在的目录。我们可以利用这个变量来构建相对路径。###步骤说明####方法1：在转换属性中定义变量1.打开转换，双击转换画布的空白区域，打开“转换属性”对话框。2.在“参数”选项卡中，添加一个变量，例如`excel_file`，值为相对路径（相对于当前转换文件的路径），比如`data/input.xlsx`。3.然后，在Excel输入步骤中，使用`${Internal.Entry.Current.Directory}/${excel_file}`来构建绝对路径。但是注意，在Windows和Linux中路径分隔符不同。为了避免这个问题，我们可以使用`${Internal.Entry.Current.Directory}\${excel_file}`（Windows）或`${Internal.Entry.Current.Directory}/${excel_file}`（Linux）。为了跨平台，Kettle会自动处理路径分隔符吗？实际上，在Kettle中，我们通常使用正斜杠（/）作为路径分隔符，因为它在Windows和Linux中都能被识别。####方法2：在转换中使用“获取系统信息”步骤1.在转换中，添加一个“获取系统信息”步骤（在“输入”类别中）。2.在“获取系统信息”步骤中，选择“系统日期”类型为“当前目录”，并将字段名设置为例如`current_directory`。3.然后，在Excel输入步骤中，使用`${current_directory}/data/input.xlsx`。注意：这个方法获取的是Kettle启动时的当前工作目录，而不是转换文件所在的目录。因此，如果通过命令行执行并指定了相对路径，可能会不同。####推荐方法：使用内置变量`${Internal.Entry.Current.Directory}`实际上，Kettle提供了内置变量`${Internal.Entry.Current.Directory}`，它表示当前转换文件所在的目录。因此，我们可以直接使用这个变量来构建绝对路径。例如，假设我们的转换文件存放在`/projects/kettle`（Linux）或`C:\projects\kettle`（Windows）中，而我们想读取该目录下的`data/input.xlsx`文件，那么在Excel输入步骤的文件名或目录处，我们可以这样写：```plaintext${Internal.Entry.Current.Directory}/data/input.xlsx```这样，Kettle会自动将变量替换为当前转换文件所在的目录，然后拼接上相对路径。###具体操作步骤1.在转换中，添加一个“Excel输入”步骤。2.在“Excel输入”步骤的配置对话框中，在“文件或目录”字段中，点击旁边的“浏览”按钮旁边的“变量”按钮（或者直接输入表达式）。3.输入表达式：`${Internal.Entry.Current.Directory}/your_relative_path/file.xlsx`（将`your_relative_path/file.xlsx`替换为你的相对路径和文件名）。4.配置其他选项（如工作表等），然后保存转换。###注意事项-**路径分隔符**：在Kettle中，使用正斜杠（/）作为路径分隔符是安全的，因为Kettle在Windows和Linux上都能正确处理它。-**变量大小写**：Kettle变量名是大小写敏感的，因此确保正确拼写。-**相对路径的起点**：`${Internal.Entry.Current.Directory}`指的是当前转换文件（.ktr）所在的目录。因此，相对路径应相对于该目录。-**如果转换未保存**：如果转换尚未保存到文件系统（例如，新建的转换且未保存），则`${Internal.Entry.Current.Directory}`可能为空。因此，请确保先保存转换。###示例转换假设我们有一个转换文件保存在`C:\kettle_jobs\excel_processing`（Windows）或`/home/user/kettle_jobs/excel_processing`（Linux）中，并且我们要读取该目录下的`data/sales.xlsx`文件。在Excel输入步骤中，我们这样填写文件路径：```plaintext${Internal.Entry.Current.Directory}/data/sales.xlsx```当执行转换时，Kettle会将该变量解析为转换文件所在的绝对路径，然后加上`/data/sales.xlsx`，从而得到完整的绝对路径。###在作业中执行如果转换是在作业中调用的，那么`${Internal.Entry.Current.Directory}`仍然指向转换文件所在的目录，而不是作业文件所在的目录。如果需要在作业中传递路径，可以在作业中设置变量，然后传递给转换。###结论在Kettle9.3的Excel输入步骤中使用相对路径，最可靠的方法是使用内置变量`${Internal.Entry.Current.Directory}`，然后拼接上相对路径。这样，无论转换在什么平台上执行，都能正确解析为绝对路径。###相关问题1.在Kettle中，如何设置全局变量以便在多个转换中共享？2.当Kettle转换文件移动位置后，相对路径是否需要调整？3.如何在Kettle中处理包含空格的路径？4.Kettle支持哪些Excel文件格式（如.xls和.xlsx）？</think>在 Kettle 9.3 中配置 Excel 输入步骤使用相对路径时，可以通过以下方法确保路径被正确解析： ### 方法 1：使用内置变量 `${Internal.Entry.Current.Directory}` 这是最推荐的方法，该变量会自动解析为**当前转换文件(.ktr)所在的目录**： 1. 在 Excel 输入步骤的"文件或目录"字段中，使用： ```plaintext ${Internal.Entry.Current.Directory}/你的相对路径/文件名.xlsx ``` ![Kettle Excel输入路径配置示例](https://example.com/kettle-path.png) *图：在文件路径中使用内置变量[^2]* 2. 示例： - 如果转换文件在 `/projects/kettle` - Excel 文件在相同目录下的 `data/input.xlsx` - 应配置为： `${Internal.Entry.Current.Directory}/data/input.xlsx` ### 方法 2：通过参数传递相对路径 适合需要动态调整路径的场景： 1. 在转换属性中定义参数（双击画布空白处）： - 添加参数如 `excel_path`，默认值设为 `data/input.xlsx` ![Kettle转换参数设置](https://example.com/kettle-params.png) *图：在转换属性中添加路径参数[^2]* 2. 在 Excel 输入步骤中使用： ```plaintext ${Internal.Entry.Current.Directory}/${excel_path} ``` 3. 执行时可通过命令行动态传参： ```bash pan.sh -file:/path/to/your.ktr -param:excel_path="new_path/data.xlsx" ``` ### 方法 3：结合文件资源库路径 如果使用文件资源库管理转换： ```plaintext ${Internal.Job.Filename.Directory}/子目录/文件.xlsx ``` 此变量会解析为资源库中存储转换文件的目录路径。 ### 重要注意事项 1. **路径分隔符**： - Linux 使用正斜杠 `/`: `${Internal...}/data/file.xlsx` - Windows 支持两种格式：`${Internal...}\data\file.xlsx` 或 `${Internal...}/data/file.xlsx` 2. **路径验证技巧**： ```plaintext 添加 "Get File Names" 步骤验证路径： ${Internal.Entry.Current.Directory}/${your_path} ``` *该步骤会检查文件是否存在，避免运行时错误[^3]* 3. **常见错误处理**： - 问题：`File does not exist` 错误 - 解决：在路径开头添加 `file://` 协议标识： ```plaintext file://${Internal.Entry.Current.Directory}/data.xlsx ``` 4. **跨平台兼容性**： - 使用正斜杠 `/` 作为分隔符 - 避免空格和特殊字符：用 `data_file.xlsx` 代替 `data file.xlsx` ### 完整配置示例 ```plaintext 转换结构： 1. 获取系统信息 → 2. Excel输入 → 3. 日志输出 步骤1：获取系统信息 添加字段：current_dir = 系统日期(类型选"当前目录") 步骤2：Excel输入 文件位置：${current_dir}/input_data/sales_report.xlsx 步骤3：表输出/日志 记录解析结果 ``` > **最佳实践**：在开发环境中使用绝对路径测试，部署时替换为 `${Internal.Entry.Current.Directory}` 的相对路径结构[^1]。 --- ### 相关问题 1. 如何在 Kettle 作业中传递路径参数给子转换？ 2. 使用文件资源库时，相对路径的基准目录是什么？ 3. Kettle 如何处理包含空格的 Excel 文件路径？ 4. 如何通过环境变量动态设置 Kettle 的根目录路径？
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值