kettle案例9-生成随机数

最新推荐文章于 2023-11-20 17:37:59 发布
原创 最新推荐文章于 2023-11-20 17:37:59 发布 · 2.5k 阅读 · 4 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#kettle #ETL

参考《ETL数据整合与处理》--任务2.6

在工作中，往往需要生成随机数验证码，作为数据或文件的验证码。为方便给授权用户验证文件，需要通过生成随机数，生成一组MD5信息授权码，作为数据文件的认证授权码。

 

 1.名称：字段的名称

2.类型：表示生成随机数的类型。单击输入框，从弹出【选择数据类型】对话框中选择，有以下类型

①随机数：生成0到1之间的随机数

②随机整数：生成一个32位的随机整数

③随机字符串：基于64位长随机值生成随机字符串

④UUID：统一唯一标识符

⑤UUID4：统一唯一标识符类型4

⑥HmacMD5：HmacMD5随机消息认证码

⑦HmacSHA1：HmacSHA1随机消息认证码

 

批量生成随机数

 

 

 执行结果：

 

 

 

数据预处理之文件转换kettle：用Kettle生成测试数据
weixin_45116412的博客
10-30 1314
【实验目的】 利用Kettle的“生成随机数”，“JavaScript代码”组件，生成测试数据。 【实验原理】 通过“生成随机数”生成随机0~1的小数，随机的字符串，随机的整数。再利用“JavaScript代码”编写代码处理随机的数或字符串，输出一定范围的小数，日期和有一定规律形式的整数。 【实验环境】 操作系统：Windows10  kettle版本：7.0.1或以上版本 【实验步骤】 一、创建转换 1．点击，在下拉菜单中点击选择，这样创建了一个转换文件。我们点击，重命名该转换文件，保存
kettle从入门到精通 第六十八课 ETL之kettle kettle随机数生成的一些方案
zhangjin1222的博客
06-12 747
4、通过java脚本进行生成，如调用 java.util.UUID.randomUUID().toString()，这里不做过多介绍。1、在做ETL数据抽取的时候，会用到生成随机数的功能，今天我们一起来学习下如何生成随机数据。随机字符串：基于 64-bit 长随机值生成一个随机字符串。随机数字：生成一个介于 0 和 1 之间的随机数。UUID4:通用唯一标识符类型 4（UUID4）随机整数：生成一个随机的 32-bit整数。UUID:通用唯一标识符（UUID）随机消息认证码（HmacSHA1）
kettle 生成随机数.ktr
02-13
生成 100 个随机数，随机数取值于[0，100）之间， 计算小于等于 50 的随机数个数和 大于50 的随机数个 数。 并把这两个统计数字放在数据库表的一行的两列中， 即输出的结果有一行，一行包括两列，每列是一个统 计值。
Kettle生成UUID(随机数)的使用
AnameJL的博客
03-25 8137
  在使用Kettle进行数据入库的时候，经常会涉及到为ID字段生成唯一标识，而UUID通常是我们生成唯一表示的选择，这个时候就需要使用到“生成随机数”功能算子，通过“生成随机数”可以生成UIID，下面就介绍下如何使用。 1.在核心对象中选择“输入“->”生成随机数”，将”生成随机数“功能算子拖入到转换页面当当中，如下图所示 2.双击“生成随机数“，然后输入字段名，再进行选择随机数类型，数据库中ID一般采用UUID这里也是以UUID作为示例，如下图所示 3.到这里生成随机数就配置完成了，不过这里生
[Kettle] 生成随机数
Hudas的博客
11-20 1553
本文主要讲解Kettle工具中的生成随机数组件的相关知识点
Kettle案例分析：随机数生成与条件计数统计
1. 生成随机数：Kettle提供了一系列的功能，允许用户生成随机数。在本例中，可能会用到的是Kettle的“生成记录”步骤，通过这个步骤，用户可以设置生成数据集的大小以及数据的范围，从而产生100个随机数。 2. 统计...
Kittle案例（Excel输入，生成记录，生成随机数，获取系统信息，排序记录，去除重复记录，替换NULL值）
qq_45908798的博客
11-19 1626
一、Excel输入 1.创建转换 将要处理的文件保存到Excel表中，然后打开kettle创建一个转换并命名，拖入“Excel输入”控件。 2.配置Excel输入控件 浏览导入Excel文件。单击【浏览(B)…】按钮，在计算机上浏览并导入“物理成绩.xls”文件，如图所示。添加并编辑Excel文件。单击【增加】按钮，将浏览导入至【文件/目录】输入框中的“E:\课件\ETL\55220-ETL数据整合与处理（Kettle）-实验数据和工程\第2章\数据”文件，添加至...
Kettle生成1亿条数据导入oracle
04-14
Kettle可以通过内置的数据生成步骤（如“生成随机数”或“生成序列”）创建大规模的模拟数据，这对于测试数据库性能、验证ETL流程的效率或构建大数据解决方案的原型是非常有用的。在这个场景中，Kettle生成的一亿条...
如何使用kettle生成100个随机数（0,100），计算小于等于50的随机数个数以及大于50的随机数个数，将计算结果Excel输出，格式为一行两列
qq_43368947的博客
06-29 4883
需求说明 使用 kettle 生成1OO个随机数，随机数取值于（0,100）之间，计算小于等于50的随机数个数和大于50的随机数个数。并把这两个统计数字放在数据库表的一行的两列中，即输出的结果有一行，一行包括两列，每列是一个统计值，输出Excel文档。 流程图： 备注：流程图中箭头的生成可以是在左边栏选择的时候直接双击后会自动建立与上一个方块的联系，或者也可以直接从左边栏将选择的拉取到右边，然后找到需要连接的箭头的始发点，按住Shift键拉到刚刚所选择的方块，即可生成箭头。 具体的操作步骤： <1
Kettle生成0到10随机数
Butingnal的专栏
07-13 5047
kettle生成0到10的随机数
kettle基本使用 01-输入步骤之 生成随机数
高新富的博客
09-02 5726
1.输入步骤概念 1.输入类步骤主要是从外部获取数据; 2.可以获取的数据源包含:文本文件(txt,csv,xml,json等格式),数据库,excel文件等桌面文件,自定义数据等; 3.对特殊的数据源和应用需求可以自定义输入插件 2.输入控件截图 2.1.文件-新建-转换 2.2.出现下面的图示 输入栏下面是所有的输入类的控件 2.3.输入类控件 ...
kettle 生成随机数
Z_Zong one的博客
10-21 552
简单的kettle组件生成随机数操作
kettle生成随机数作业
b_javabear的博客
02-13 2015
题目：生成 100 个随机数，随机数取值于[0，100）之间， 计算小于等于 50 的随机数个数和 大于50 的随机数个 数。 并把这两个统计数字放在数据库表的一行的两列中， 即输出的结果有一行，一行包括两列，每列是一个统 计值。 以下是kettle转换 注意点： 1、右键生成随机数--》可选择改变开始复制的数量 2、kettle报过错：一个未预期的错误发生在Spoon: probable cause:在停止Spoon前，请先关闭其它spoon窗口! 我的解决方法：点击工具--数据库-..
Kettle
weixin_51945579的博客
06-09 234
kettle
kettle过滤、生成随机数、改变开始复制数量
ajsyipsc40270的博客
09-10 876
下面是一个用Kettle实现数据过滤、生成随机数、改变开始复制数量的连贯示意图。 首先，我们将控件一一建立，通过hop建立连接 下面对每一个控件进行设置 1.生成随机数控件（随机取一个数字与字符串） 2.过滤控件 3.文本文件输出 4.改变开始复制的数量 这个功能实际的含义是：设置多少份的拷贝，开多少线程 例如：开20个线程，拷贝20份，那么单击控件...
oracle取整函数 kettle,怎样使用Kettle生成随机样本数据
weixin_39929259的博客
04-12 691
一、问题背景很多数据工程师都会遇到一种情况，即部分数据不是来源于真实场景，而是需要随机生成。虽然从严格意义上讲，随机意味着有统计规律的实验结果，但在大部分ETL场景下，随机指的是伪随机数据。本文试图从数据的认识论角度讨论数据类型，并给出Kettle如何生成随机数据的解决方案。二、数据分类从数据挖掘的角度来分析，数据包括以下两种常用类别：1、标称标称可以理解为标准称呼的缩写，代表一些符号或者事物的名...
kettle 生成uuid
热门推荐
neweastsun的专栏
08-31 1万+
示例说明如何在kettle中生成uuid，因为目标表的主键是uuid，不是数值类型的自增字段。
在kettle中使用js控件生成mysql库中的uuid
lljj1027的专栏
08-25 714
1、var testuuid = replace(Packages.java.util.UUID.randomUUID(),"-",""); 2、选择兼容模式
kettle0-100随机数
最新发布
04-03
### 如何在 Kettle 中生成 0 到 100 的随机数 在 Kettle（Pentaho Data Integration, PDI）中，可以通过“生成随机数”步骤来实现这一需求。以下是具体方法： #### 使用“生成随机数”步骤 Kettle 提供了一个名为“生成随机数”的步骤，用于创建各种类型的随机数值。要生成介于 0 和 100 之间的整数型随机数，可以在该步骤中配置相应的参数[^1]。 - **字段名称**: 定义输出列的名称。 - **最小值 (Min)**: 设置为 `0`。 - **最大值 (Max)**: 设置为 `100`。 - **精度/小数位数**: 如果只需要整数，则设置此值为 `0`。 完成上述配置后，“生成随机数”步骤将会按照指定范围生成所需的随机数。 #### 示例转换设计 下面是一个简单的示例流程说明如何构建这样的转换： 1. 添加一个“生成行”步骤作为输入源，它能够提供固定数量的基础记录； 2. 链接至“生成随机数”，并依据前述指导调整其属性； 3. 将最终结果导向目标位置或者查看器组件以便观察效果。 ```plaintext +------------------+ +--------------------+ | Generate Rows |----->| Generate Random Num| +------------------+ +--------------------+ ``` 如果希望进一步处理这些随机产生的数字，比如筛选特定区间内的值或是与其他表关联操作等，都可以继续扩展这个基本框架下的逻辑链条。 另外值得注意的是，在某些场景下可能还需要考虑重复性问题以及分布特性等因素的影响。对于更复杂的伪随机序列要求，则需借助脚本语言编写自定义解决方案[^3]。 ### 注意事项 尽管“生成随机数”非常有用，但在实际应用过程中也要注意潜在的风险点。例如当涉及敏感业务数据加密保护时单纯依赖此类简单算法未必安全可靠；此时应优先选用更加成熟的哈希函数如MD5等方式生成不可逆映射关系。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值