数据准备:hive数据库文件 例路径为:/user/hadoop/hive/test
在mysql创建与hive中数据库结构一样的数据库。
启动sqoop2服务 $ sqoop2-server start
登录客户端 $ sqoop2-shell
创建数据库对象:

创建hdfs的link对象:

创建一个job作业:

启动这个job作业:start job -j 1 -s
以此启动完成。
这里有几个小细节要注意的:
1.hive中数据库的制表符要指定为',',不然mysql识别不了他的数据。
2.mysql中数据库要与hive中的字段顺序、名称、类型要一直,不然也会执行job失败。
3.mysql中的数据库不可有主键,不然也会导致失败,如果你可以保证你设置的那个列的值唯一的话也可以有。
4.如果想要删除已有的job或者link的话指令为delete job -j job的id号,delete link -l link的id号。例:delete link -l link 1
5.要修改的话就把delete换成update就可。

本文介绍如何通过Sqoop工具将Hive中的数据迁移到MySQL数据库中,包括数据准备、创建数据库对象、配置Job作业及启动流程,并提供了一些实践中的注意事项。
2197

被折叠的 条评论
为什么被折叠?



