kettle7.1无法从Mongo中读取数据

最新推荐文章于 2024-04-29 22:41:41 发布
最新推荐文章于 2024-04-29 22:41:41 发布
阅读量239 收藏
点赞数
文章标签： 数据库
本文介绍使用Kettle读取MongoDB时遇到的问题及解决方法。通过调整ReadReference设置，选择最近节点模式成功读取数据。文章探讨了不同读取模式的特点及其适用场景。

 今天使用kettle读取mongo数据库时，刚开始一直无法读取数据：

在配置项中偶然选择了一个nearest然后成功了，麻蛋。

 

然后百度查询了下Read Reference是干嘛的，原来是读取源的模式，严重怀疑我们这个数据源设置了不允许从主库读取：

以下5种为读取模式，看来选择最后一种最邻近的是最明智的：

 

 

使用kettle采集并处理MongoDB数据库中的数据
需要远程指导仿真实验、代码有问题的，请后台私信或者关注公众号
07-07 4847
本实验任务主要完成基于ubuntu环境的使用kettle采集并处理MongoDB数据库中的数据的工作。通过完成本实验任务，要求学生熟练掌握使用kettle采集并处理MongoDB数据库中的数据的方法，为后续实验的开展奠定ETL平台基础，也为从事大数据平台运维工程师、大数据技术支持工程师等岗位工作奠定夯实的技能基础。1、掌握使用kettle采集并处理MongoDB数据库中的数据Ubuntu16.04、Java1.8、Kettle7.1、MongoDB3.6.2Kettle 中文名称叫水壶，该项目的主程序员MA
kettle之mongo输出
u011619974的专栏
12-24 2195
TransMeta transMeta = new TransMeta(); transMeta.setName(name); DatabaseMeta from = transToDatabaseMeta(f); DatabaseMeta to = new DatabaseMeta(); to.setDBPort(t.getPort()); to.setHostname(t.getHo
【kettle007】kettle访问MongoDB数据库并处理数据至execl文件（已更新）
kngines
04-29 1066
1.一直以来想写下基于kettle的系列文章，作为较火的数据ETL工具，也是日常项目开发中常用的一款工具，最近刚好挤时间梳理、总结下这块儿的知识体系。 2.熟悉、梳理、总结下MongoDB数据库相关知识体系。 3.欢迎批评指正，跪谢一键三连！
MongoDB数据迁移之迁移工具Kettle
weixin_36723038的博客
12-01 2186
Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。Kettle 中文名称叫水壶，该项目的主程序员MATT 希望把各种数据放到一个壶里，然后以一种指定的格式流出。Kettle这个ETL工具集，它允许你管理来自不同数据库的数据，通过提供一个图形化的用户环境来描述你想做什么，而不是你想怎么做。
kettle 连接mongodb失败问题
qq_26645205的博客
10-27 3869
解决办法： 目录：data-integration\system\karaf\etc\config.properties 文件中下部有一行 org.osgi.framework.bootdelegation=（一堆参数） 在末尾处加上 ,javax.crypto,javax.crypto.* Mongo就可以正常连接读取数据了。
kettle7.1.rar
12-24
关于标签“数据仓库”，Kettle 7.1在构建数据仓库解决方案中发挥着重要作用。它能够帮助用户构建ETL流程，将来自不同系统的分散数据整合到统一的数据仓库中，为业务分析和决策支持提供一致、准确的信息。 综上所述...
kettle 7.1数据库连接驱动包
06-08
1. 数据库连接的核心：数据库连接驱动包是Kettle与各种数据库进行通信的桥梁，它负责解析和执行SQL语句，实现数据的读取、写入和更新。如果没有匹配的驱动包，Kettle将无法识别和连接到特定的数据库系统，导致操作...
kettle7.1可用版本
02-08
kettle7.1可用版本
Kettle 7.1 中文使用手册.docx.zip
06-12
通过深入学习和实践Kettle 7.1的中文使用手册，用户能够熟练掌握数据集成的技巧，无论是在数据清洗、数据分析还是大数据处理方面，都能发挥出强大的效能。同时，了解Kettle的高级特性和插件体系，将进一步提升数据...
ETL工具kettle7.1的oracle和mysql驱动
最新发布
06-04
其中oracle驱动能同时访问oracle 11g和oracle 12c两种版本，亲测试有效。
spoon 连接mongodb
01-08
pdi-ce-7.1.0.0-12连接mongodb并设定时间参数查询数据
kettle抽取mongodb数据库遇到的问题
一个努力前进的小菜鸟
10-11 2545
javascript 转码url有两个内置函数一个是 encodeUrl() 另一个是encodeURIComponent（） 区别是：encodeUrl编码的时候会对汉字等进行utf8编码，但是不会对+,?,/等敏感字符进行编码，而encodeURIComponent（）会对特殊的符号进行utf8转码。
kettle和MongoDB之间的数据同步
一锅粥
10-18 6889
最近有一个调优的项目设计到MongoDB数据转移到Mysql库进行数据分析。 以下是利用kettle对数据的转换的介绍： 1：MongoDb的查询：   主要是基于json格式：具体的查询可以见连接MonGoDb的查询语句。   数据集是  由于带有时间戳timestamp,可以在kettle中基于时间戳对其增量读取。 2：kettle对于这种非关系型的数据库的设置主要是利用big
kettle使用MongoDB Input连接mongodb获取数据异常处理记录
htmljsp的博客
12-04 3650
kettle 使用 连接mongodb ，报错处理 com.mongodb.MongoCommandException: Command failed with error 16436: 'Unrecognized pipeline stage name: 'ADD_TIME'' on server 192.168.2.144:27017. The full response is { "ok" : 0.0, "errmsg" : "Unrecognized pipeline stage name: 'A
KETTLE（二）--kettle连接MongoDB转换到MySQL
weixin_45938400的博客
10-11 3763
下载 mongodb连接：1.https://www.mongodb.com/try#community 2.https://www.mongodb.com/try/download/community 使用Kettle抽取MongoDB的数据到MySQL数据等关系型数据库中还是比较简单的，因为Mongo中存储的都是json格式的数据，所以取出数据后按照json的格式拆分出来就行啦。 流程  1.数据转换   1点击BigData–>MongoDB input     连接 连接到mysql
kettle案例七连接hive--抽取mongodb的数据保存到hive
热门推荐
直到世界的尽头
01-16 1万+
hive作为数据仓库的载体，一般情况下我们会经常把数据保存到hive中。 本章通过抽取mongodb的数据保存到hive的案例来学习连接hive。 kettle把数据导入hive有两种思路 一种是通过hiveserver2使用JDBC的连接方式，这种是一条一条的进行写入，可能速度上要慢一些。 一种是使用Hadoop File Input方式把文件放入hdfs，然后使用hive命令来加载。适...
Kettle 7.1 教程：数据抽取与转换
"Kettle 7.1 使用文档(初级)" Kettle是一款强大的开源ETL（Extract, Transform, Load）工具，由Java编写，可在多种操作系统上运行，包括Window、Linux和Unix。其名称来源于“KETTLE ETL ENVIRONMENT”的首字母缩写...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值