
ETL
FreyFan
这个作者很懒,什么都没留下…
展开
-
WARN hdfs.DFSClient: Caught exception
20/07/06 14:11:27 WARN hdfs.DFSClient: Caught exception java.lang.InterruptedException at java.lang.Object.wait(Native Method) at java.lang.Thread.join(Thread.java:1281) at java.lang.Thread.join(Thread.java:1355) at org.apa原创 2020-07-06 14:36:22 · 848 阅读 · 1 评论 -
sqoop Streaming result set com.mysql.jdbc.RowDataDynamic is still active
2020-07-06 11:20:56,735 ERROR manager.SqlManager: Error reading from database: java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@7a2bfad9 is still active. No statements may be issued when any streaming result sets are open and in us原创 2020-07-06 11:46:48 · 1810 阅读 · 0 评论 -
CentOS下sqoop安装及使用,关系型与HDFS/Hbase数据交换
CentOS下sqoop安装 1.在官网找到适合 hadoop2.X 的sqoop进行下载 2.输入 mkdir /usr/local/sqoop 建立sqoop目录 3.将下载好的tar包放到该目录 4.进入该目录,输入解压命令,解压tar包 5.输入 mv sqoop-1.4.6.bin_...原创 2020-07-03 11:41:33 · 188 阅读 · 0 评论 -
kettle教程,简单插入与更新
本文要点:Kettle的建立数据库连接、使用kettle进行简单的全量对比插入更新:kettle会自动对比用户设置的对比字段,若目标表不存在该字段,则新插入该条记录。若存在,则更新。 Kettle简介:Kettle是一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行,数据抽取高效稳定。Kettle 中文名称叫水壶,该项目的主程序员MATT 希望把各种数据放到一个壶里,然后以一种指定的格式流出。Kettle这个ETL工具集,它允许你管理来自不同数据...原创 2020-05-26 16:37:32 · 2052 阅读 · 0 评论