
ËTL
文章平均质量分 58
千鸟渡落日
小白进击史
展开
-
ETL学习(一)——初见基本名词
一、Hive是基于Hadoop的开源数据仓库二、HiveQLHive对外提供的查询语言叫HiveQL,做查询时将HQL语句转换成MapReduce任务。三、ETLETL的英文全称是 Extract-Transform-Load 的缩写,用来描述将数据从来源迁移到目标的几个过程:1.Extract,数据抽取,也就是把数据从数据源读出来。2.Transform,数据转换,把...原创 2018-11-29 18:28:24 · 2181 阅读 · 0 评论 -
ETL学习(二)——Sqoop
一,sqoop命令sqoop帮助查看sqoop支持哪些命令列出的MySQL的有哪些数据库[hadoop @ hadoop3~] $ sqoop list-databases \> --connect jdbc:mysql:// hadoop1:3306 / \> --username root \> --password root列出的MySQL的中某个数...原创 2018-11-29 18:39:07 · 500 阅读 · 0 评论 -
ETL学习(三)——Spoon
这次来利用kettle迁移一张数据表。首先在数据库建一个student2,表结构与student相同。1.界面2.转换3.双击转换4.DB连接5.DB连接-新建数据库连接向导6.选择数据库类型7.8.已连接9.在左边的面板中选择“核心对象”,在核心对象里面选择“输入->表输入”,用鼠标拖动到右边面板。如图所示:...原创 2018-12-03 14:49:02 · 725 阅读 · 0 评论 -
kettle 迁移数据表时出现中文乱码
迁移数据表时出现下图情况这是因为字符编码不统一。1.2.3.保存后,再跑一遍就ok了。原创 2018-12-06 14:06:37 · 1478 阅读 · 0 评论