shell脚本运行mysql和impala

Learn_program_

已于 2023-12-22 08:54:37 修改

阅读量1.3k

点赞数 2

文章标签： mysql android adb

于 2019-02-12 10:21:17 首次发布

本文链接：https://blog.youkuaiyun.com/Learn_program_/article/details/87070869

版权

本文详细介绍了使用MySQL和Impala进行数据导入的具体步骤。包括通过bash脚本实现MySQL的表创建、数据加载，以及Impala的数据导入过程。特别关注了在不同环境下执行SQL语句的方法和技巧。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

mysql

#！ /etc/bash
# 1文件名 2脚本中表名
echo start
hdfs dfs -put ~/$1 /root
mysql -uroot -p123456 <<EOF
use test;
source ~/work/create_table.sql;
load data infile '/root/$1' into table `$2` fields terminated by `,` lines terminated by '\n';
EOF
if [ $?=0 ]
then echo 'sql success'
else echo 'sql error'
fi
echo all success

mysql语句在<<EOF EOF中运行，相对简单

impala

#！ /etc/bash
# 1文件名 2脚本中表名
echo start
hdfs dfs -put "test_csv.csv" "/user/root"
impala-shell -f  "create_table.sql" -i *****:端口号
echo all success

-f代表执行文件，换成-q即可执行一个sql语句（暂未找到如何像mysql一次执行多个sql语句，但可以多执行几次impala-shell实现）

-i *****:端口号此部分在运行impala-shell时会出现这部分Connected to *****:端口号