Sqoop导出模式——全量、增量insert、更新update的介绍以及脚本示例
背景信息SQOOP支持直接从Hive表到RDBMS表的导出操作,也支持HDFS到RDBMS表的操作,当前需求是从Hive中导出数据到RDBMS,有如下两种方案:Ø 从Hive表到RDBMS表的直接导出:该种方式效率较高,但是此时相当于直接在Hive表与RDBMS表的数据之间做全量、增量和更新对比,当Hive表记录较大时,或者RDBMS有多个分区表时,无法做精细的控制,因此暂时不考虑该方案。Ø ...
原创
2018-07-10 20:32:08 ·
20820 阅读 ·
0 评论