Kettle5.4调用Redis

最新推荐文章于 2024-10-15 11:25:59 发布

huryer

最新推荐文章于 2024-10-15 11:25:59 发布

阅读量4.2k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： etl java redis 文章标签： kettle redis 字典转换 java 性能

本文链接：https://blog.youkuaiyun.com/huryer/article/details/98789906

java 同时被 3 个专栏收录

68 篇文章

订阅专栏

etl

42 篇文章

订阅专栏

redis

4 篇文章

订阅专栏

本文详细介绍了如何在Kettle中集成Redis，通过具体步骤演示了数据读取过程，并分享了性能测试结果，最后讨论了使用Redis作为字典转换服务的可能性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

概述

Redis作为一个开源免费，高性能的kv数据库，官方称号称能够达到10w+的读写速度；本文讲解Redis如何与kettle结合，看看能够擦出什么火花~~
Redis版本：3.2.100
Kett版本：5.4

1、启动redis-server

redis-server redis.windows.conf

在这里插入图片描述

2、写入测试数据：

使用redis命令行工具写入一条测试数据：

Redis-cli.exe
Set k1 TestRedisGetFunction

在这里插入图片描述

3、添加jedis基础包

默认etl不支持redis调用，需要将jedis-3.1.0.jar包到${etl_root}\lib目录下;

4、新建转换

在这里插入图片描述

5、编写步骤1:生成记录

此步骤用于生成一条提示信息：
在这里插入图片描述

6、编写步骤2:java代码

import redis.clients.jedis.Jedis;
private Jedis jedis=null;
public boolean processRow(StepMetaInterface smi, StepDataInterface sdi) throws KettleException
{
	if (first){
	  first = false;

	/*connect to redis server*/
	 //连接本地的 Redis 服务
     jedis = new Jedis("localhost");
	logBasic("Connection to server sucessfully");

      //查看服务是否运行
	logBasic("Server is running: "+jedis.ping());
	}

	Object[] r = getRow();

	if (r == null) {
	  setOutputDone();
	  return false;
	}

    r = createOutputRow(r, data.outputRowMeta.size());
	
    String v=jedis.get("k1");
    // Set a value in a new output field
    get(Fields.Out, "k1").setValue(r, v);

	// Send the row on to the next step.
    putRow(data.outputRowMeta, r);

	return true;
}