文章目录
Hive shell脚本企业实战用法,定时调度
在我们日常的工作中,肯定不会一条一条的使用SQL去取出你想要的数据,这个时候我们就可以用Linux中的定时器Shell脚本。我们可以编写一个定时任务,一小时或者一天将SQL写入脚本,让SQL自动执行然后取出数据即可,这样我们就可以实现了数据的定时调度。
建立分区表
create external table students_pt1
(
id bigint
,name string
,age int
,gender string
,clazz string
)
PARTITIONED BY(pt string)
ROW FORMAT DELIMITED FIELDS TERMINATED BY ','
LOCATION '/student/input1';
增加分区
alter table students_pt1 add partition(pt='20220220');
alter table students_pt1 add partition(pt=<

本文介绍了如何使用Hive shell脚本进行企业级实战应用,包括创建分区表、增加分区、查看分区、插入数据以及通过shell命令运行Hive SQL。同时,详细展示了如何设置定时调度任务,利用Shell脚本来实现Hive查询的自动化执行,并提供了日志记录和查看的方法。
最低0.47元/天 解锁文章
1760





