hive导出查询内容的方法

最新推荐文章于 2024-02-25 11:27:50 发布
原创 最新推荐文章于 2024-02-25 11:27:50 发布 · 1.6k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍如何将Hive中的统计数据导出到MySQL的方法，包括使用Hive SQL语句将结果写入本地文件，以及直接通过Linux命令调用Hive获取结果并保存为文件。

因为业务上需要把hive统计的结果，插入到mysql中，总结了操作方法如下：

一、可以将hive HQL 统计的结果生成到指定的目录

       INSERT OVERWRITE LOCAL DIRECTORY  '/tmp/result.txt' select id,name from t_test;

二、直接把统计结果生成文件

在linux输入下面的命令

      hive -e"select id,name from t_test;"> result.txt

hive导出到csv hive导出到excel
yy的博客
11-19 5470
-- 导出到csv 逗号分隔 列中字符串含逗号容易冲突 hive -e "set hive.cli.print.header=true;set hive.tez.container.size=3020;set hive.execution.engine=tez;select * from dwd.dwd_fact_issue_issue_and_reply" | sed 's/[\t]/,/g' > ./res.csv -- 导出到文本 \t分隔 方便复制到excel hive -e "s
Hive数据导出的四种方法
m0_62332728的博客
01-16 6873
介绍hive四种数据导出方法：Insert语句导出、Hadoop命令导出、Hive shell命令导出、Export语句导出
hive数据加载导出查询
04-12
hive数据加载的几种方式、数据的导出、数据简单查询
Hive查询结果导出
weixin_40447107的博客
05-24 1719
导出到本地 #未登陆hive客户端时 #第一种： #其中test.csv文件无效预先创建 hive -e "select * from test" >> /tmp/test.csv #第二种：#其中test.hql为查询语句 hive -f test.hql >> /tmp/test.csv #已登陆hive客户端时 其中/tmp为目录 默认生成00000_...
【数据库笔记】hive查询结果导出到本地
西瓜太郎
04-20 300
1 未登陆hive客户端 【数据库笔记】VM15运行hive の 命令 就是说只是启动了hadoop 这种方法无法指定生成csv文件的路径，会生成在hadoop启动的文件目录下 方法一：bin/hive -e bin/hive -e " set hive.cli.print.header=true; use kaikeba; SELECT a.user_name, sum(a.pay_amount), sum(a.refund_amount) FROM (
Hive数据导出
chongfa2008的博客
08-02 321
1：insert 导出 语法 INSERT OVERWRITE [LOCAL] DIRECTORY directory1 [ROW FORMAT row_format] [STORED AS file_format] (Note: Only available starting with Hive 0.11.0) SELECT ... FROM ... 将查询的结果导出到本地 insert overwrite local directory '/install/hived...
hive导出查询结果到本地文件
千里之行,始于足下
06-20 4941
最近在使用hive时，需要将hive查询的数据导出到本地文件系统，HQL语法如下： INSERT OVERWRITE [LOCAL] DIRECTORY directory1 select_statement1 查询结果导出到本地文件后，试图使用excel加载时遇上了麻烦：不知道hive导出文件时使用的分隔符， 使用文本编辑器打开也显示乱码。 最后在官方文档上找了半天才发现，hi
hive 表结构导出
05-19
支持hive 源数据、表结构导出
Hive导出查询结果
最新发布
07-24
Hive 提供了多种方式将查询结果导出到外部文件或系统，以便进行进一步的数据处理和分析。以下是几种常见的导出方法及其操作方式： 1. **使用 `INSERT OVERWRITE LOCAL DIRECTORY` 命令导出到本地文件系统** 通过...
批量导出hive表结构
11-27
通过shell脚本，批量把一个库下面的表结构全部导出，在开发环境执行过。
Hive几种数据导出方式 – 过往记忆
09-21
Hive几种数据导出方式，总结的几种方式希望能帮到大家
Hive_Hive查询结果导出的几种方式
热门推荐
迎难而上
07-03 2万+
我们经常利用Hive完成一些数据报表统计的需求，此时我们在特定场景中需要对Hive查询的结果做导出，这样就延伸出了几种查询结果导出的方法，我们这里做一下总结。1.利用beeline 执行查询，将输出重定向的方式2.利用insert overwrite 的方式，将查询结果导出hdfs或者本地第一步我们看下主体的查询语句：use default; SELECT media_info.med...
Hive数据的导入导出和查询方式
ZCC的专栏
10-18 1113
一、导入数据进入Hive表的几种方式 1）加载本地文件到hive表 load data local inpath '/opt/datas/emp.txt' into table default.emp ; 2）加载hdfs文件到hive中 load data inpath '/user/beifeng/hive/datas/emp.txt' overwrite in
hive表中的数据导出:表数据的导出7种方式
11-26 1万+
将hive表中的数据导出到其他任意目录，例如linux本地磁盘，例如hdfs，例如mysql等等 insert导出 1）将查询的结果导出到本地 ：第一种 insert overwrite local directory '/export/servers/exporthive/a' select * from score; 2）将查询的结果格式化导出到本地 ：第二种 insert overwri...
beeline 将查询的数据导出来_Hive数据导出的几种方式
weixin_39996798的博客
01-17 4834
在hive的日常使用中，经常需要将hive表中的数据导出来，虽然hive提供了多种导出方式，但是面对不同的数据量、不同的需求，如果随意就使用某种导出方式，可能会导致导出时间过长，导出的结果不满足需求，甚至造成集群资源不必要的浪费。因此本文主要对hive支持的几种导出方式的使用进行整理，并给出每种导出方式的使用场景，便于指导操作者能够选取最佳的导出方式。利用insert overwrite的方式，将...
hive表中的数据导出 多种方法详细说明
nuhao的博客
02-25 1736
基本语法：（hive -f/-e 执行语句或者脚本 > file）3）将查询的结果导出到HDFS上(没有local)2）将查询的结果格式化导出到本地。1）将查询的结果导出到本地。
导出hive表数据的5种方法
u012957549的博客
12-27 1万+
下面介绍一下hive 导出的几种方式 本地文件直接导出 insert overwrite local directory '/data/hive/export/student_info' select * from default.student 修改分隔符和换行符 insert overwrite local directory '/data/hive/export/student_...
HiveQL:数据操作-导入和导出
hxh的博客
12-10 999
–向管理中加载数据 (分区目录不存在，则会先创建分区) load data local inpath '${env:HOME}/california-employees' overwirte into table employees partition (country = 'US', state ='CA') –通过查询语句向表中插入数据 insert overwrite table empl...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值