kettle PDI学习笔记（十一）：映射

最新推荐文章于 2024-05-27 14:43:23 发布
原创 最新推荐文章于 2024-05-27 14:43:23 发布 · 646 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#大数据 #etl

本文介绍了Kettle PDI中映射的使用，通过映射实现子转换的封装和重用。举例说明了如何创建一个从t_orders表获取数据，依据u_id查询t_users表，获取用户信息并存储到Excel的转换过程，涉及到数据库查询和Excel输出步骤。

目录

映射

映射用来定义子转换，便于封装和重用

映射（子转换）是用来配置转换，对子转换进行调用的一个步骤，比如要在一个转换里边调用另一个转换，这时候就需要用到映射子转换

映射输入规范是输入字段，由调用的转换输入。

映射输出规范是向调用的转换输入所有列，不做任何处理。

例子：从t_orders表获取数据，根据u_id查询t_users表，获取用户信息，存储到Excel。

user表
在这里插入图片描述
role表
在这里插入图片描述
在这里插入图片描述表输入
在这里插入图片描述
好了，去新建个转换
在这里插入图片描述映射输入规范，名称是逻辑外键

最低0.47元/天 解锁文章
Kettle10：Kettle映射控件
qq_28286027的博客
05-12 707
映射 1.映射是转换里面的第十八个分类。 2.映射是用来定义子转换，便于封装和重用。 映射（子转换） 映射（子转换）是用来配置子转换，对子转换进行调用的一个步骤。 映射输入规范 映射输入规范是输入字段，由调用的转换输入。 映射输出规范 映射输出规范是向调用的转换输出所有列，不做任何处理。 案例： 从t_orders表中获取数据，根据u_id查询t_users表，获取用户信息，并把数据保存到Excel 分析： 输入：表数据 映射：映射（子转换） 输出：Excel输出 映射：映射输入规范 查询：数据
kettle从入门到精通 第十五课 kettle 映射 (子转换)01
zhangjin1222的博客
01-27 817
5）更多细节参考官网https://help.hitachivantara.com/Documentation/Pentaho/9.2/Products/Simple_Mapping_(sub-transformation)1、kettle 里面的映射和java代码里面的封装是一个概念，就是将一个可复用的模块单独抽离为公共模块供其他模块引用，用到的步骤或者组件如下。2、构建子映射，子映射需要用到映射输入规范和映射输出规范两个组件，相当于输入和输出参数，如下图所示。4）输出：输出参数设置。
kettle实验十二：子转换数据质量统计
weixin_44727274的博客
01-26 1421
【实验目的】 1.利用Kettle的“映射输入规范”，“映射输出规范”，“映射”组件，生成转换和作业。 2.熟练掌握“映射输入规范”，“映射输出规范”，“映射”，“JavaScript代码”，“分组”等组件的使用，实现调用子转换进行数据质量统计。 【实验原理】 利用“映射输入规范”，“映射输出规范”构成子转换。然后，通过“映射”组件调用子转换。在子转换中，实现数据的质量统计。 【实验环境】 操作系统：Windows10  Kettle版本：7.1.0.0 jdk版本：1.8.0及以上版本 【实验步骤】 一、
kettle开发篇-映射-Day30
qq_29061315的博客
12-28 1029
前言： 昨天我们讲了分组，可以帮助我们处理分组的数据，并且可以将数据进行组合，进行我们来看一个新的组件，映射。映射是用于定义子转换，方便封装和重用。 一、映射 映射用来定义子转换，便于封装和重用。本次我们主要来讲解映射下面的三个子功能，分别为映射(子转换)、映射输入规范、映射输出规范。 1、映射(子转换) 映射(子转换)是用来配置子转换，对子转换进行调用的一个步骤，即我们在转换里面调用转换...
Kettle:映射(十一)
有点想法的专栏
12-05 757
文章目录1.组件总览2.常用组件2.1 映射子转换2.2 映射输入规范2.3 映射输出规范 后续更新 1.组件总览 映射是用来定义子转换，便于封装和重用 2.常用组件 2.1 映射子转换 2.2 映射输入规范 2.3 映射输出规范 ...
PDI(KETTLE)学习笔记
qq_27937101的博客
08-02 4584
PDI（KETTLE）学习笔记简介主要文件组件树介绍转换作业组件生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 简介 一款ETL（Extract-Transform-Load的缩写，即数据抽取、转换、装载的过程）工具...
Kettle工具学习笔记与Oracle索引分析
【标题】: "Kettle学习笔记" 【知识点】 Kettle是一个开源的ETL工具，全称为Pentaho Data Integration (PDI)，是Pentaho套件的一部分。ETL是数据仓库的关键部分，负责将各种数据源中的数据抽取出来，经过转换后...
ETL学习笔记之Kettle下载与部署与使用
09-19
### ETL学习笔记之Kettle下载与部署与使用 #### 一、Kettle概念与应用场景 Kettle是一款功能强大的开源ETL（Extract-Transform-Load）工具，它使用纯Java编写，因此可以在多种操作系统上运行，包括Windows、Linux...
Kettle转换引擎学习笔记详解
根据提供的文件信息，我们可以提炼出一些与“kettle学习笔记”相关的知识点。本文将详细地介绍Kettle的基本概念、特点、使用方法以及它作为ETL工具在数据处理中的应用。同时，本文也会涉及源码级别的了解和一些实用...
Kettle 通俗易懂讲明白值映射
程志伟的博客
07-12 3440
关注微信公共号：小程在线 关注优快云博客：程志伟的博客 只对核心部分进行详细描述 一、总体情况 由excel输入、值映射、excel输出三部分构成 二、Excel输入 excel输入和前面将的类似，不在重复描述 三、值映射 1.在使用的字段名：选择age字段 2.目标字段名：随便起一个名字 3.不匹配时的默认值：未知 4.在源值、目标值填写我们要映射的值 四、Excel输出 和前面的类似、就是选择输出路径 五、启动 六...
《kettle子转换即映射》博客示例代码
10-05
《kettle子转换即映射》博客示例代码; http://blog.youkuaiyun.com/neweastsun/article/details/39804383
kettle常见控件（输入、输出，字段选择、设置变量、记录集连接、值映射、字符串替换、js、Java）的使用案例
07-18
包括数据库迁移，增量抽取，多表合成一张表，一个字段拆分成多字段，数据正则过滤、kitchen部署调优等案例，内含相应数据库的SQL脚本、kjb、ktr文件，以及使用过程中会经常遇到的bug注意事项
kettle子转换即映射
neweastsun的专栏
10-05 7637
kettle的子转换，及映射类的步骤详细介绍。是重用转换的一种有用的方式，让一些公共算法重构成子转换，供其它转换调用。
Kettle8.2映射组件
在记录自己编程工作与编程生活的同时，给那些困于无法入门编程世界的朋友提供一点帮助，在有限的生命中给有需要的人尽一点绵薄之力。
04-18 1097
Kettle8.2映射组件一、相关说明二、设计转换三、转换配置四、运行转换五、结果查看 一、相关说明 映射组件说明： 映射是用来定义子转换，便于封装和重用。主要组件有映射（子转换）、映射输入规则、映射输出规则等。 映射（子转换）组件说明： 映射（子转换）是用来配置子转换，对子转换进行调用的一个步骤。 映射输入规则组件说明： 映射输入规范是输入字段，由调用的转换输入。 映射输出规则组件说明： 映射输出规范是向调用的转换输出所有列，不做任何处理。 需求说明： 从数据库中的edu_cours
kettle学习之子映射组件
最新发布
信徒博客
05-27 417
根据数据库表中的id查询出想要的字段，并把字段存到excel表中。映射输入规范，类似java方法中的形参。name vsxcd是方法返回的参数。
kettle实验十八：查找表映射
weixin_44727274的博客
01-26 1378
【实验目的】 1.利用Kettle的“合并排序”等组件，构建面向对象分析的数据仓库。 2.熟练掌握“排序记录”，“合并排序”，“字段选择”等组件的使用，构建面向对象分析的数据表格。 【实验原理】 通过“排序记录”对多张表格的外键进行排序，然后通过“记录集连接”进行多表连接，再通过“字段选择”选择合适的字段输出到表格。 【实验环境】 操作系统：Windows10  Kettle版本：7.1.0.0 jdk版本：1.8.0及以上版本 【实验步骤】 一、建立转换 双击spoon.bat打开kettle。（1）点击
kettle数据字典动态映射
weixin_37530941的博客
06-03 1138
kettle数据字典动态映射
Kettle中的值映射的使用
AnameJL的博客
11-23 8023
KETTLE中的值映射的使用 用法一：生成新的一列，并且根据自己的需求，将对应值进行更改 在整个转换流程中添加一个”值映射” 双击”值映射”,在”值映射”配置窗口中进行配置 进行参数配置，配置讲解如下： ”使用字段选择”：选择好自己需要更改值的字段名(color)； ”目标字段名”：就是所要生成新的一列的字段名(new_color)； “不匹配时的默认值”：就是所选择的”使用字段名”的列中的值在没有匹配到的时候的默认值(紫色)； “字段值”：可以看到在”字段值”的下方有一个表格状的输入框，有”源值”
kettle 映射的使用——对自定义参数处理
archer的技术故事
03-31 8677
kettle  映射的使用——对自定义参数处理 kettle中能够传递自定义的参数，同时每个参数能够通过javascript进行转换，下面介绍一下 如何使用。 首先需要建立一个转换，转换中定义一个映射（位置就在左侧的映射中），映射中是对参数转换的一个过程。 其中输入的具体设置如下： add的具体内容： 做完上述的操作后，保存这个转换，然后再建立一个
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值