deepin安装kettle7.1.0.0-12

最新推荐文章于 2022-11-01 10:58:30 发布
原创 最新推荐文章于 2022-11-01 10:58:30 发布 · 700 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#deepin #ubuntu

本文提供Kettle7.1.0版本的下载链接及安装配置教程，包括MySQL驱动安装步骤与常见错误处理方法，并详细介绍了解决表输入预览卡顿问题的具体方案。

软件版本：kettle7.1.0.0-12，百度云下载链接: https://pan.baidu.com/s/1Imjz7BYuqew7zfPXExrVNA  密码: iidq

mysql的java包驱动：百度云下载链接: https://pan.baidu.com/s/1QWnGzbIXG2yrRXpyl-opVQ  密码: 52se

xulrunner软件版本：xulrunner-1.9.2.28pre.en-US.linux-x86_64，百度云下载链接: https://pan.baidu.com/s/1Wy2cINrUm5xCZw01HQJ7LA  密码: minn

目录

1：下载：

2：运行

3：要连接MySQL数据库的话，需要数据库驱动，放到/data-integration/lib/下面：

4：常见错误处理

下载后直接放到个人文件夹，我的是/usr/local/application/data-integration，打开文件夹，

1：下载：

2：运行

最低0.47元/天 解锁文章
java调用kettle进行采集
wsbgmofo的博客
08-30 595
1,引入jar包,这跟kettle相关的包好像有点多 <dependency> <groupId>kettle</groupId> <artifactId>kettle-core</artifactId> <version>7.1.0.0-12</version> <...
xulrunner-1.9.2.28pre.en-US.linux-x86_64.tar.rar
07-11
在CentOS7上安装KETTLE8的时候用到的，解决了以下问题 org.eclipse.swt.SWTError: No more handles [MOZILLA_FIVE_HOME=''] (java.lang.UnsatisfiedLinkError: Could not load SWT library. Reasons: no swt-mozilla-gtk-4335 in java.library.path no swt-mozilla-gtk in java.library.path /root/.swt/lib/linux/x86_64/libswt-mozilla-gtk-4335.so: libxpcom.so: cannot open shared object file: No such file or directory Can't load library: /root/.swt/lib/linux/x86_64/libswt-mozilla-gtk.so 下载后解压出tar文件 上传到linux运行以下命令 # tar -xvf xulrunner*.tar # cd ./xulrunner # ./xulrunner -register-global
kettle引入jar包.rar
12-01
kettle引入jar包，里面包含kettle-core-8.3.0.0-371.jar，kettle-engine-8.3.0.0-371.jar，metastore-8.3.0.0-371.jar，这三个 jar 包，如果通过 maven 引入不成功可以尝试一下通过 maven 命令将这三个jar包导入到 maven 仓库中
kettle-core-7.1.0.0-12.jar
09-19
java代码执行hive相关ktr时报错： database type with plugin id [HIVE2] couldn't be found! 解决：kettle-core-7.1.0.0-12.jar适配hive后的包。具体步骤请查看https://blog.csdn.net/m0_37618809/article/details/81632342
pentaho-kettle-7.1.0.1-R.zip
07-04
pentaho-kettle-7.1.0.1属于etl交换开源工具kettle的源码，包括数据同步、插入更新等
deepin-elf-verify-0.0.16.10-1-amd64 uos兆芯，intel,amd依赖包
08-10
deepin-elf-verify_0.0.16.10-1_amd64 uos兆芯，intel,amd依赖包
deepin-elf-verify-0.0.16.10-1-arm64 UOS依赖包 ARM UOS鲲鹏依赖包
08-10
deepin-elf-verify_0.0.16.10-1_arm64 UOS依赖包 ARM UOS鲲鹏依赖包
精选资源
deepin-elf-verify_0.0.14.5-1_arm64.deb
12-15
签名下载ELF检测
精选资源
com.deepin.wine.Platform.2.18-10.flatpak
01-08
标题中的"com.deepin.wine.Platform.2.18-10.flatpak"是指Deepin Wine平台的一个特定版本，这是由Deepin操作系统...用户只需使用Flatpak命令行工具或者Deepin Software Center（如果是在Deepin系统上）进行安装即可。
kettle 7.1
01-18
kettle 7.1 win 版安装包 s
kettle 7.1（pdi-ce-7.1.0）安装软件-百度网盘地址.txt
02-18
kettle7.1.0新版[ETL工具,可以在Windows、Linux、Unix上运行],kettle 7.1（pdi-ce-7.1.0）安装软件-百度网盘地址
kettle-ui-swt-7.1.0.0-12.jar
10-30
kettle-ui-swt-7.1.0.0-12.jar 可修改包中资源 核心jar包
pdi_ce7.1.0.0-12.zip
07-06
kettle2018版7.1.0.0-12压缩版本，pdi_ce_7.1.0.0-12.zip
kettle7.1批量下载HTTP文件
09-15
使用kettle批量下载文件的示例代码，一个主作业，一个下载作业，一个转换，这里可以从数据库里获取数据。
开源的ETL工具-kettle7.1
09-10
Kettle最早是一个开源的ETL（Extract-Transform-Load的缩写）工具，全称为KDE Extraction, Transportation, Transformation and Loading Environment。后来Kettle重命名为Pentaho Data Integration 。 它由Java开发，支持跨平台运行，其特性包括：支持100%无编码、拖拽方式开发ETL数据管道；可对接包括传统数据库、文件、大数据平台、接口、流数据等数据源；支持ETL数据管道加入机器学习算法。Kettle是一个实现ETL开发的一款开发工具，Spoon是Kettle工具提供的图形化界面。
Kettle7.1版本下载地址
weixin_36815898的博客
03-21 2916
https://sourceforge.net/projects/pentaho/files/Data%20Integration/7.1/
Deepin 系统启动kettle（Pentaho ）
weixin_40274051的博客
11-01 975
spoon.sh kettle（Pentaho） Deepin deepin
kettle7.1.rar
12-24
kettle7.1下载资源
Kettle 7.1 SDK
10-31
Kettle 7.1开发需要类库，开源ETL工具，适合开发人员使用。
补充kettle版本是7.1.0.0.12的，结合版本提供测试案例
最新发布
08-09
<think>我们正在处理Kettle 7.1.0.0.12版本的升级测试，涉及两个关键库的升级： 1. XStream从1.4.9升级到1.4.20 2. Spring Core从4.3.2升级到5.x（建议使用5.3.x版本，因为Spring 5.0.x到5.3.x都是相对稳定的，且与Kettle的兼容性较好） 根据引用[1][5]，Kettle 7.1.0.12-R的源码结构包括core、engine、dbdialog、ui等模块，并且运行方式有图形界面、命令行和API三种。因此，我们的测试案例需要覆盖这三种运行方式，同时特别关注XStream（用于转换和作业的序列化）和Spring Core（如果Kettle被集成到Spring项目中）的兼容性。 以下为升级后的功能兼容性测试案例设计，分为核心功能测试、XStream升级专项测试、Spring集成测试和边缘案例测试四部分。 ### 一、核心功能测试（确保基本功能不受影响） 1. **图形界面(Spoon)启动测试** - 步骤：升级后，双击Spoon.bat（Windows）或Spoon.sh（Linux）启动图形界面。 - 预期：界面正常启动，无启动错误日志（检查控制台或日志文件）。 - 引用：根据引用[2][3]，Spoon.bat是启动图形界面的入口，需确保Java环境配置正确。 2. **转换执行测试（图形界面）** - 步骤：在Spoon中创建一个简单转换（如：生成随机数->输出到日志），运行转换。 - 预期：转换成功执行，日志输出正确，无错误。 3. **作业执行测试（图形界面）** - 步骤：在Spoon中创建一个作业（包含一个转换步骤和一个成功条件），运行作业。 - 预期：作业执行成功，所有步骤状态为绿色（成功）。 4. **命令行执行测试** - 步骤：使用Pan（转换）和Kitchen（作业）命令行工具执行上述转换和作业。 - 命令示例：`Pan.sh -file="/path/to/trans.ktr"`，`Kitchen.sh -file="/path/to/job.kjb"` - 预期：执行成功，退出码为0，日志输出正确。 5. **API嵌入执行测试** - 步骤：编写一个Java程序，使用Kettle的API（如`Trans`、`Job`类）执行转换和作业。 - 预期：程序无编译错误，执行结果与命令行一致。 ### 二、XStream升级专项测试（重点：XML序列化/反序列化） Kettle使用XStream来读写转换（.ktr）和作业（.kjb）的XML文件。升级XStream可能带来安全修复和序列化行为变化。 1. **转换文件读写测试** - 步骤： 1. 在Spoon中创建一个包含多种步骤的转换（如输入、转换、输出步骤），保存为.ktr文件。 2. 关闭Spoon，重新打开并加载该转换。 3. 使用文本编辑器打开.ktr文件，检查是否有异常标签。 - 预期：转换文件正常读写，所有步骤和配置信息完整保留。 2. **作业文件读写测试** - 步骤：同上，使用作业（.kjb）文件。 3. **API序列化测试** - 步骤：在Java API中，使用`TransMeta`和`JobMeta`的`loadXml`和`getXml`方法，测试内存对象与XML的互转。 - 预期：无`XStream`相关异常（如`ClassNotFoundException`、`ConversionException`）。 4. **安全漏洞修复验证** - 背景：XStream 1.4.20修复了多个安全漏洞（如CVE-2020-26217）。 - 步骤：尝试加载一个恶意构造的.ktr文件（包含未授权类型或危险内容）。 - 预期：XStream应抛出安全异常，阻止恶意文件解析。 ### 三、Spring Core升级专项测试（如果Kettle被集成到Spring项目中） 根据引用[1][5]，Kettle支持API嵌入，因此可能被集成到Spring应用中。Spring Core从4升级到5，需关注以下测试点： 1. **Spring上下文加载测试** - 步骤：在Spring Boot 2.x项目中（使用Spring 5.x），配置Kettle环境初始化（`KettleEnvironment.init()`）的Bean，并启动Spring容器。 - 预期：Spring容器启动成功，Kettle环境初始化无错误。 2. **依赖注入测试** - 步骤：在Spring管理的Bean中注入Kettle对象（如`TransMeta`、`JobMeta`），并执行转换/作业。 - 预期：注入成功，转换/作业执行正确。 3. **AOP代理测试** - 步骤：对Kettle相关Bean（如执行转换的服务类）应用Spring AOP（如事务、日志切面）。 - 预期：AOP代理生效，不影响Kettle功能。 4. **响应式编程兼容性（可选）** - 步骤：在Spring WebFlux（响应式）环境中调用Kettle API（注意：Kettle本身是阻塞的，需测试在异步线程中的执行）。 - 预期：转换/作业可正常执行，但需注意线程阻塞问题。 ### 四、边缘案例测试 1. **高并发执行测试** - 步骤：在多线程环境下同时执行多个转换或作业（使用API方式）。 - 预期：无死锁、资源竞争或内存泄漏（监控JVM堆内存和线程状态）。 2. **大文件处理测试** - 步骤：使用一个大数据量（如百万行）的转换，测试升级后的执行性能。 - 预期：执行时间与升级前无显著差异（允许±10%波动）。 3. **跨版本文件兼容性** - 步骤：使用旧版Kettle（7.1.0.0.12升级前）创建的转换/作业文件，在新版本中加载。 - 预期：文件正常加载，无兼容性错误。 ### 五、已知问题规避（根据引用资料） - **问题1**：图形界面启动依赖`xulrunner`（引用[3]）。升级后需确保`xulrunner`兼容。 - 测试点：在Linux（如Deepin）下启动Spoon，验证界面无崩溃。 - **问题2**：数据库连接问题（引用[4]）。升级后需测试数据库连接。 - 测试点：在Spoon中连接Oracle/MySQL等数据库，执行SQL步骤。 ### 六、测试执行建议 1. **环境隔离**：使用Docker容器或虚拟机创建纯净的测试环境。 2. **自动化测试**：对核心功能（如转换执行、文件读写）编写JUnit测试，确保快速回归。 3. **日志监控**：启用Kettle的详细日志（设置日志级别为`Detailed`），检查是否有`WARN`或`ERROR`。 ### 七、常见问题与解决方案 - **问题**：升级后Spoon启动报错`java.lang.NoSuchMethodError`（Spring相关）。 - **原因**：Spring 5中移除了某些旧方法。 - **解决**：检查Kettle代码中是否调用了过时的Spring API，并替换为Spring 5的等效方法。 - **问题**：XStream解析转换文件失败。 - **原因**：XStream 1.4.20默认禁止某些类型。 - **解决**：配置XStream的安全策略，允许Kettle需要的类型（参考`XStream.setupDefaultSecurity`方法，但注意该方法在1.4.20中已废弃，需使用`XStream.addPermission`）。 ### 总结 通过上述测试案例，可全面验证Kettle 7.1.0.0.12在升级XStream和Spring Core后的兼容性。重点覆盖XML序列化、Spring集成和核心功能，确保升级不影响生产环境稳定性。测试通过后，用户将获得更安全的XStream和更现代的Spring框架支持。 §§相关问题§§ 1. 如何自动化执行Kettle的兼容性测试？ 2. Spring Boot 3.x是否支持Kettle集成？ 3. 升级XStream到2.x版本对Kettle有哪些影响？ 4. Kettle在高并发场景下的最佳配置是什么？</think>### Kettle 7.1.0.0.12 升级后功能兼容性测试案例 （XStream 1.4.9 → 1.4.20，Spring Core 4.3.2 → 5.x） --- #### **一、核心功能测试** 1. **图形界面（Spoon）启动测试** - **步骤**： 1. 升级后执行 `spoon.bat`（Windows）或 `spoon.sh`（Linux）[^2][^3] 2. 观察界面加载过程 - **预期结果**： - 界面正常启动，无 `ClassNotFoundException` 或 `NoSuchMethodError` - 插件列表完整显示（如 Oracle 连接插件）[^4] - **验证指标**：启动时间 $< 15 \text{s}$，无错误弹窗 2. **转换/作业执行测试** - **步骤**： 1. 创建含输入（CSV）、转换（JavaScript 步骤）、输出（Oracle 表）的转换[^4] 2. 通过 Spoon 和 `pan.sh` 命令行分别执行 - **预期结果**： - 数据完整写入 Oracle 表，JavaScript 计算逻辑正确 - 命令行返回状态码 `0` - **验证指标**：数据一致性 $100\%$，执行时间波动 $< \pm 10\%$（对比升级前） --- #### **二、XStream 升级专项测试** 1. **XML 配置文件兼容性** - **步骤**： 1. 将现有 `.ktr` 转换文件用 XStream 1.4.20 反序列化为 `TransMeta` 对象 2. 修改后重新序列化为 XML - **预期结果**： - 无 `XStreamException` 或节点丢失 - 升级后 XML 可被旧版 Kettle 7.1.0.0.12 读取（向后兼容） - **验证指标**： $$ \text{解析成功率} = \frac{\text{成功加载文件数}}{\text{总测试文件数}} \times 100\% = 100\% $$ 2. **安全漏洞修复验证** - **步骤**： 1. 注入恶意 XML 实体（如 `<!ENTITY xxe SYSTEM "file:///etc/passwd">`） - **预期结果**： - XStream 1.4.20 抛出 `XStreamSecurityException`，阻断攻击 - 日志明确提示 `Forbidden XML element`[^1] --- #### **三、Spring Core 升级专项测试** 1. **API 嵌入测试** - **步骤**： 1. 在 Spring Boot 2.x 项目中调用 Kettle API： ```java KettleEnvironment.init(); Trans trans = new Trans(transMeta); trans.execute(null); ``` - **预期结果**： - 无 `BeanCreationException`（Spring 5 依赖注入兼容） - 转换在 Spring 托管线程中正常执行 2. **依赖冲突测试** - **步骤**： 1. 在项目中引入 `spring-core-5.3.30` 和 `kettle-core-7.1.0.0.12` 2. 运行 `mvn dependency:tree` 检查冲突 - **预期结果**： - 无 `spring-core` 4.x 残留（避免 `MethodNotFoundException`） - 日志无 `SLF4J` 绑定冲突警告 --- #### **四、边缘场景测试** 1. **跨操作系统兼容性** - **步骤**： 1. 在 Deepin 系统使用 `xulrunner-1.9.2.28pre` 启动 Spoon[^3] 2. 执行含 SWT 控件的转换（如文件选择器） - **预期结果**： - 图形控件渲染正常，无 `UnsatisfiedLinkError` 2. **高并发压力测试** - **步骤**： 1. 通过 API 同时启动 50+ 转换实例 - **预期结果**： - 无 `ThreadPool` 资源耗尽（Spring 5 的 `TaskExecutor` 兼容性） - 内存占用 $< 1.5 \text{GB}$（JVM 参数 `-Xmx1024m`） --- #### **五、已知问题规避方案** | 风险场景 | 解决方案 | 引用依据 | |---------------------------|--------------------------------------------------------------------------|---------------| | 启动报错 `Plugin ID 'Kettle'` | 检查 `kettle-password-encoder-plugins.xml` 是否在 `resources/` 目录 | [^1][^5] | | Oracle 连接失败 | 确认 `ojdbc8.jar` 在 `lib` 目录，且 Spoon 重启后加载 | [^4] | | Linux 界面崩溃 | 使用指定版本 `xulrunner-1.9.2.28pre` | [^3] | --- #### **六、测试工具建议** - **自动化测试**：JUnit 5 + `KettleTestUtils`（模拟转换执行） - **依赖检查**：`mvn dependency:tree | grep -E 'xstream|spring-core'` - **性能监控**：`VisualVM` 监控堆内存和线程状态 > **执行顺序建议**： > 1. 单功能测试 → 2. 集成测试 → 3. 压力测试 → 4. 回归旧版功能验证 通过以上案例可验证： 1. XStream 1.4.20 的安全性和兼容性提升 2. Spring 5 在依赖管理和并发控制上的优势 3. Kettle 核心功能在升级后的稳定性[^1][^2][^5]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值