Vicky_Tang

#!/bin/bash # 接收两个参数 date1="$1" date2="$2" # 定义日期变量 tempdate=`date -d "$date1" +%F` # 定义起始时间戳和终止时间戳，用来计算起始日期和终止日期中间的天数 startdateSec=`date -d "$date1" +%s` enddateSec=`date -d "$date2" +%s` min=1 # 计算起始日期和终止日期中间的天数 max=`expr \( $enddateSec - $startdateS.

1.软件版本介绍 软件名 安装包名 Mysql mysql57-community-release-el7-9.noarch.rpm JDK jdk-8u171-linux-x64.tar.gz Hadoop hadoop-3.1.3.tar.gz Hive apache-hive-3.1.2-bin.tar.gz Zeppelin zeppelin-0.8.2-bin-all.tgz Zookeeper apache-zookeeper-3.5.7-bin.tar.gz

Shell一键关闭Hadoop、Hive脚本 #!/bin/bash source /etc/profile #一键关闭脚本配置文件 CNF_FILE="stop.cnf" #读取配置文件中配置的服务项 CNF_LINES=(`cat $CNF_FILE`) COUNT=0 for item in ${CNF_LINES[@]} do ((COUNT++)) item=(${item//->/ }) echo "$COUNT、${item[0]}" done #选择需要关闭的服务 rea

Hive常见set的配置设置 设置reduce数量（默认值-1） set mapred.reduce.tasks=100; set mapreduce.job.reduces=3; 修改表为内部表 set tblproperties('EXTERNAL'='FALSE'); 开启分桶表（默认false） set hive.enforce.bucketing=true; 开启Hive中间传输数据压缩功能 set hive.exec.cmpress.intermediate=true; 开启mapred

Shell 一键启动脚本 #!/bin/bash #start.cnf配置文件名称 CNF_FILE='start.cnf' #验证配置文件是否存在 if [ ! -e $CNF_FILE -o -d $CNF_FILE ] then echo $CNF_FILE" unavailable or directrory,script will exit" exit 0 fi #获取配置文件内容 CNF_LINES=(`cat start.cnf`) count=0 #遍历所需启动的服务 for item