hive -e 和 -f 通过beeline执行文件中的hive sql语句

最新推荐文章于 2025-03-26 21:33:35 发布
置顶 最新推荐文章于 2025-03-26 21:33:35 发布
阅读量1.1w 收藏 37
点赞数 5
分类专栏： Hive 文章标签： Hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/litlit023/article/details/109473337
版权
本文介绍如何使用hive-e、hive-f及beeline-f等命令在服务器命令行中直接执行Hive SQL语句或SQL脚本文件，避免进入hive交互模式。文章提供了具体的命令格式示例，并给出了解决账号链接问题的方法。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

1. 在服务器命令行中直接执行sql语句或者sql文件中的内容

有时需要在命令行中直接执行hive sql语句，希望不进入hive模式执行，这时候就可以使用hive -e 或者 hive -f 来实现

1. hive -e 和 hive -f 

2. beeline -f ，beeline使用

beeline -u "jdbc:hive2://localhost:10000"  -n yourname -p  passwore -f  hivescript.sql

beeline使用方式请参考：https://www.cnblogs.com/lenmom/p/11218807.html

如果账号链接不上，检查下是不是账号系统ldap服务挂了：systemctl restart slapd

3. 参考链接

https://blog.youkuaiyun.com/paulfrank_zhang/article/details/80735633

https://blog.youkuaiyun.com/u010002184/article/details/99686311

https://blog.youkuaiyun.com/weixin_36630761/article/details/77239451

hive中执行.sql文件
qq_40302627的博客
05-11 1168
hive -e hive -e “source 路径/文件.sql” hive -e ""也可以直接执行sql语句 hive -f #hive文件/cib/a.sql中的语句： select * from student where etl_date='${hivevar:input_date}' and jxsj='${hivevar:yesterday}'; 执行a.sql文件 `hive -hivevar input_date=20200202 -hivevar yesterday=2020020
beeline执行sql文件_Hive/Beeline 使用笔记
weixin_39720662的博客
12-23 1813
Hive:利用squirrel-sql 连接hiveadd driver -> name&example url(jdbc:hive2://xxx:10000)->extra class path ->Add{hive/lib/hive-common-*.jarhive/lib/hive-contrib-*.jarhive/lib/hive-jdbc-*.jarhive/...
beeline执行sql文件_hive 脚本用户 and beeline
weixin_33346418的博客
02-06 3892
HiveServer2Clients简介1.beeline是什么​ Beeline，是HiveServer2的JDBC客户端，基于SQLLine命令行接口。Beeline Shell可以工作在嵌入式模式和远程模式，在嵌入式模式中，它运行一个嵌入式的Hive(类似于Hive CLI)，在远程模式中，通过Thrift连接到一个单独的HiveServer2进程，从Hive 0.14开始，当Beel...
Hive工作所遇问题之Hive -e命令中使用正则表达式问题
最新发布
weixin_42771366的博客
03-26 414
今天工作因为之前建表时，看不到数据，导致建表的字段格式有问题，然后使用split函数拆分时，发现是正则表达式使用的问题。下面来说明问题。
java生成excel文件到指定目录_05566.1.0Hive On Spark修改作业临时配置文件生成目录...
weixin_31887861的博客
11-30 343
作者：李继武1文档编写目的在Hive On Spark的模式下，无论是通过Beeline还是hive CLI访问Hive，使用Spark引擎执行SQL语句时，都会在/tmp目录下生成一个spark_submit.*.properties文件。Hive CLI方式会在当前节点/tmp目录生成，使用Beeline方式则会在HiveServer2所在节点的/tmp目录下生成。一般情况下spar...
存储引擎、mysql体系结构、mysql查询机制
laomumu1992的博客
11-25 351
Mysql插拔式的存储引擎 存储引擎的介绍：1、插拔式的插件方式 2、存储引擎是指定在表之上的，即一个库存中的每一个表都可以指定专用的存储引擎。 3、不管采用什么样的存储引擎，都会在数据区 ，产生对应的frm文件（表结构定义描述文件） cvs...
.sql文件_Mysql分组排序及Sql文件执行
weixin_39595621的博客
11-27 182
最近在做一个临时项目，采用的是mysql开发，主要涉及两个问题：1.一个是传参问题；2.另一个是实现对数据分组取前4的数据。个人感觉很有意义，特此记录一下。一.传参问题执行mysql文件，需要从外部传入参数时，mysql没有hive那么灵活，只有通过sed命令进行处理，比如有sql文件a.sql内容大致如下:create table if not exists dp_co...
apache-hive-2.3.3-bin.tar.gz
04-02
Apache Hive 是一个基于Hadoop的数据仓库工具，它允许用户通过SQL-like语言（称为HQL，Hive Query Language）对大规模数据集进行分析和查询。在Hadoop生态系统中，Hive扮演着数据仓库和数据分析的重要角色，尤其适用...
hive-jdbc-1.2.1-standalone
11-15
在“jars”这个压缩包子文件的文件名称列表中，我们可以推测包含了一系列的JAR（Java Archive）文件，这些文件是Java编程中的库文件，包含了运行Hive JDBC所需的类和资源。通常，这些JAR可能包括以下部分： 1. **...
apache-hive-3.1.2-bin.tar.zip
10-02
1. **Hive架构**：Hive将用户的SQL语句转换为MapReduce任务在Hadoop集群上执行，提供了一种将结构化数据文件映射为数据库表并提供简单的SQL查询功能的方式。 2. **元数据存储**：Hive使用MySQL或Derby等数据库存储...
apache-hive-2.1.0-bin.tar.gz
05-25
`apache-hive-2.1.0-bin.tar.gz` 是Apache Hive 2.1.0版本的二进制发行版，包含了运行和使用Hive所需的所有组件和文件。 在Hive 2.1.0中，主要包含以下几个关键组件和特性： 1. **Hive Metastore**：这是Hive的...
beeline执行sql文件_【SparkSQL】介绍、与Hive整合、Spark的th/beeline/jdbc/thriftserve2、shell方式使用SQL...
weixin_39834406的博客
01-26 777
目录一、Spark SQL介绍SQL on Hadoop框架：1)Spark SQL2)Hive3)Impala4)PhoenixSpark SQL是用来处理离线数据的，他的编程模型是DF/DSSpark SQL的特点：1)集成：可以和各种复杂SQL：spark.sql("")2)统一的数据访问：连接Hive, Avro, Parquet, ORC, JSON, and JDBC外部数据源统一的方...
MySQL中一条查询是如何执行的
刀林寻诗
10-08 396
现在有一个表T，给定一条如下的sql： mysql> select * from T where ID=10； 我们看到的只是输入一条语句，返回一个结果，却不知道这条语句在 MySQL 内部的执行过程。要了解SQL执行的过程就要先了解MySQL的基本架构体系，如下图： ...
cdh中使用beeline跑SQL脚本，并且加入kerberos认证
qq_46183404的博客
05-21 794
cdh中hive使用beeline跑SQL脚本，并且加入kerberos认证
YARN的调度器--------公平调度器（Fair Schedule）
sunqingok的博客
11-11 894
一、特点 1） 可配置的层级队列：所有队列都来自于root队列。可用的资源被分配给root队列的孩子队列，孩子队列分得的资源可统一分配给孩子队列的孩子队列。公平调度支持为每个队列设置不同的策略，让队列通过用户想要的方式来分享资源。 2） 自动把应用程序放置到队列中：允许管理员配置策略，把提交的应用程序自动的放置到合适的队列中。 二、 配置 1） 配置ResourceManager： 在conf/yarn-site.xml中配置yarn.resourcemanager.scheduler.class，值为or
解决beeline -e 无法执行多条sql 问题
bymain的博客
07-22 3359
beeline -e 执行多行sql 语法
Hive3.1.2的Beeline执行过程
云来山更佳，云去山如画
09-01 2600
Hive3.1.2的Beeline执行过程
HIVE beeline使用shell 批量执行sql语句
热门推荐
u013385925的专栏
08-24 3万+
shell脚本如图所示： principal：代表的是认证方式 #!/bin/sh #-------------------------------------------- #Date: #Author: #------------------------------------------------ #########################################
【hive】beeline常用操作指令
开发随笔-猫咪酱
12-03 3742
1、!connect url –连接不同的Hive2服务器 2、!exit –退出shell 3、!help –显示全部命令列表 4、!verbose –显示查询追加的明细 The Beeline CLI 支持以下命令行参数: Option Description --autoCommit=[true/false] ---进入一个自动提交模式：beeline --autoCommit=true --autosave=[true/false] ---进入一个自动保存模式：beel.
hive -f
03-19
### 如何使用 `hive -f` 执行 SQL 脚本文件 在 Hive 中，可以通过 `-f` 参数来执行存储在文件中的 SQL 脚本。以下是关于如何使用该功能的具体说明： #### 使用方法 要使用 `hive -f` 执行 SQL 文件，需提供包含 SQL 语句的文件路径作为参数[^1]。例如，假设有一个名为 `hive-f-test.sql` 的文件位于 `/data/test/` 目录下，则可以运行以下命令： ```bash bin/hive -f /data/test/hive-f-test.sql ``` 此命令会读取指定文件中的所有 SQL 语句并依次执行它们。 #### 变量传递 如果需要向 SQL 文件中传递变量，可以结合 `--hivevar` 参数完成这一操作[^2]。例如，在 SQL 文件中定义了一个表名变量 `${hivevar:table_name}`，则可以在命令行中这样调用： ```bash bin/hive --hivevar table_name=tab_01 -f /data/test/hive-f-test.sql ``` 这会使 SQL 文件内的 `${hivevar:table_name}` 替换为实际值 `tab_01`。 #### Beeline 支持 除了传统的 Hive CLI 外，还可以通过 Beeline 工具以相同方式执行 SQL 文件[^3]。Beeline 是一种更轻量级的客户端工具，推荐用于较新版本的 Hive 部署环境。其语法如下所示： ```bash beeline -u jdbc:hive2://localhost:10000/default -f /data/test/hive-f-test.sql ``` 以上即为利用 `hive -f` 参数执行 SQL 脚本的主要方法及其扩展应用情况介绍。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值