Curl获取GET/POST接口数据然后注入Hive

for your wish

已于 2024-08-14 09:46:45 修改

阅读量844

点赞数

CC 4.0 BY-SA版权

文章标签： hive hadoop 数据仓库

于 2022-11-17 09:57:56 首次发布

本文链接：https://blog.youkuaiyun.com/someInNeed/article/details/127898297

Shell 同时被 2 个专栏收录

11 篇文章 ¥9.90 ¥99.00

订阅专栏

超级会员免费看

ETL

17 篇文章

订阅专栏

该博客讲述了如何在用户授权后通过GET请求获取接口数据，并利用这些数据调用HQL查询从Hive数据仓库中获取项目代码。接着，文章说明了如何构造POST请求，将获取的信息用于进一步的数据操作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

#/bin/bash

judge_hostname(){
hostname=`hostname -i`
case $hostname in
172.16.68.46)
 echo "mut1.jmkx"
 ;;
172.16.68.47)
 echo "mut2.jmkx"
 ;;
172.16.68.48)
 echo mut3.jmkx
 ;;
172.16.68.49)
 echo "mut4.jmkx"
 ;;
172.16.68.50)
 echo "mut5.jmkx"
 ;;
172.16.68.51)
 echo "mut6.jmkx"
 ;;
172.16.68.91)
 echo "mut7.jmkx"
 ;;
172.16.68.92)
 echo "mut8.jmkx"
 ;;
esac
}
ret=`judge_hostname`
echo ${ret}

#查看当前用户,调用脚本的用户，可以执行hive语句，root用户没有权限执行
whoami_result=`whoami`
echo 11111111111111111
echo $whoami_result

hostname=`hostname -i`
echo=$hostname
pwd_ret=`pwd`
echo $pwd_ret
#调用expect, 默认超时时间是10秒
/usr/bin/expect<<-EOF
set timeout -1
spawn su - root -s /bin/bash $pwd_ret/get2hdfs.sh $whoami_result
expect "Password:" {send "${ret}\r"}
expect eof
EOF

#用户变更,执行下面程序
#su - $whoami_result
<