利用udf函数将hive数据导入到mysql

本文介绍如何使用Hive的UDF功能将Hive表中的数据直接导入MySQL数据库的方法。通过创建临时函数并指定MySQL连接信息及目标表结构,实现高效的数据迁移。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >


hive>add jar /opt/cloudera/parcels/CDH/jars/hive-contrib-1.1.0-cdh5.11.0.jar;
 

 
hive>add jar /usr/share/java/mysql-connector-java.jar;
 


hive>CREATE TEMPORARY FUNCTION dboutput AS 'org.apache.Hadoop.hive.contrib.genericudf.example.GenericUDFDBOutput';

 


hive>select

dboutput(

                'jdbc:mysql://localhost/dbname',

                'root',

'123456',

'insert into tab(col1_name,col2_name) values(?,?)',

clo1_name,col2_name)

from hive_db.hive_tab

limit 10;


#通过上面的语句将hive表数据直接导入到sql数据库

注:需要提前在sql数据库中建好tab表



评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值