dss启动脚本

该脚本是一个用于管理DSS集群的bash脚本,包括启动和停止DSS组件如HiveMetastore、HiveServer2,以及其他相关服务如Spark、Zookeeper、DolphinSchedule等。它首先检查命令行参数,然后执行相应的操作,如启动或停止服务,并检查服务状态。

dss启动脚本

#!/bin/bash
if [ $# -lt 1 ]
then
    echo "请正确输入:my_dss.sh {start|stop}"
    exit
fi
HIVE_LOG_DIR=$HIVE_HOME/logs
if [ ! -d $HIVE_LOG_DIR ]
then
	mkdir -p $HIVE_LOG_DIR
fi
#检查进程是否运行正常,参数1为进程名,参数2为进程端口
function check_process()
{
    pid=$(ps -ef 2>/dev/null | grep -v grep | grep -i $1 | awk '{print $2}')
    ppid=$(netstat -nltp 2>/dev/null | grep $2 | awk '{print $7}' | cut -d '/' -f 1)
    echo $pid
    [[ "$pid" =~ "$ppid" ]] && [ "$ppid" ] && return 0 || return 1
}

function hive_start()
{
    metapid=$(check_process HiveMetastore 9083)
    cmd="nohup hive --service metastore >$HIVE_LOG_DIR/metastore.log 2>&1 &"
    cmd=$cmd" sleep 4; hdfs dfsadmin -safemode wait >/dev/null 2>&1"
    [ -z "$metapid" ] && eval $cmd || echo "Metastroe服务已启动"
    server2pid=$(check_process HiveServer2 10000)
    cmd="nohup hive --service hiveserver2 >$HIVE_LOG_DIR/hiveServer2.log 2>&1 &"
    [ -z "$server2pid" ] && eval $cmd || echo "HiveServer2服务已启动"
}
function hive_stop()
{
    metapid=$(check_process HiveMetastore 9083)
    [ "$metapid" ] && kill $metapid || echo "Metastore服务未启动"
    server2pid=$(check_process HiveServer2 10000)
    [ "$server2pid" ] && kill $server2pid || echo "HiveServer2服务未启动"
}
case $1 in
"start")
		echo " =================== 启动 dss-alone ==================="
		
		echo " =================== 启动 hadoop集群 ==================="
		echo " --------------- 启动 hdfs ---------------"
        ssh dss-alone "/opt/module/hadoop-2.7.2/sbin/start-dfs.sh"
        echo " --------------- 启动 yarn ---------------"
        ssh dss-alone "/opt/module/hadoop-2.7.2/sbin/start-yarn.sh"
        echo " --------------- 启动 historyserver ---------------"
        ssh dss-alone "/opt/module/hadoop-2.7.2/sbin/mr-jobhistory-daemon.sh start historyserver"
		
		echo " ------------------- 启动 Metastroe和HiveServer2-------"
		hive_start
      	echo " ------------------- 启动 spark -----------------------"
       	"/opt/module/spark-2.4.3/sbin/start-all.sh"
		sleep 1
		"/opt/module/spark-2.4.3/sbin/start-history-server.sh"
		echo " ------------------- 启动 dss-alone -------------------"
 	    "/opt/module/dss/bin/start-all.sh"
		echo " ------------------- 启动 schedulis_0.7.0_exec --------"
		cd /opt/module/schedulis-0.7.0/schedulis_0.7.0_exec/
		sleep 1
		./bin/start-exec.sh
		echo " ------------------- 启动 schedulis_0.7.0_web ---------"
		cd /opt/module/schedulis-0.7.0/schedulis_0.7.0_web/
		sleep 1
		./bin/start-web.sh 
		echo " ------------------- 启动 visualis --------------------"
	    cd /opt/module/visualis-server/
		sleep 1
		./bin/start-visualis-server.sh
		echo " ------------------- 启动 exchangis -------------------"
		cd /opt/module/exchangis/sbin/
		sleep 1
		./daemon.sh start server
		echo " ------------------- 启动 zookeeper --------------------"
		ssh dss-alone /opt/module/zookeeper-3.5.7/bin/zkServer.sh $1
		sleep 3
		echo " ------------------- 启动 dolphinschedule --------------"
		"/opt/module/ds-1.3.9/bin/start-all.sh"
		sleep 1
		echo " ------------------- 启动 streamis-0.2.0 ---------------"
		"/opt/module/streamis-0.2.0/streamis-server/bin/start-streamis-server.sh"
		echo " ------------------- 启动 qualitis-0.9.2 ---------------"
		"/opt/module/qualitis-0.9.2/bin/start.sh"
		#echo " ------------------- 启动 dataease --------------------"
		#cd /deployments/
		#sleep 1
		#./my_dataease.sh start
		#echo " ------------------- 启动 dataX------------------------"
		#cd /opt/module/datax/datax-web-2.1.2
		#sleep 1
		#./bin/start-all.sh
;;
"stop")
        echo " ===================关闭 dss-alone ==================="
		echo " ------------------- 关闭 qualitis-0.9.2 ---------------"
		"/opt/module/qualitis-0.9.2/bin/stop.sh"
		echo " ------------------- 关闭 visualis -------------------"
		"/opt/module/visualis-server/bin/stop-visualis-server.sh"
		echo " ------------------- 关闭 dolphinschedule --------------"
		"/opt/module/ds-1.3.9/bin/stop-all.sh"
		echo " ------------------- 关闭 streamis-0.2.0 ---------------"
		"/opt/module/streamis-0.2.0/streamis-server/bin/stop-streamis-server.sh"
		echo " ------------------- 关闭 schedulis_0.7.0_exec -------"
		aa=$(check_process AzkabanExecutorServer)
		[ "$aa" ] && kill $aa || echo "AzkabanExecutorServer服务未启动"
		echo " ------------------- 关闭 schedulis_0.7.0_web --------"
		bb=$(check_process AzkabanWebServer)
		[ "$bb" ] && kill $bb || echo "AzkabanWebServer服务未启动"
		echo " ------------------- 关闭 exchangis ------------------"
		cc=$(check_process ExchangisServerApplication)
		[ "$cc" ] && kill $cc || echo "ExchangisServerApplication服务未启动"
		echo " -------------------关闭 dss-alone -------------------"
	    "/opt/module/dss/bin/stop-all.sh"
		echo " --------- 关闭 Metastroe和HiveServer2----------------"
		 hive_stop
       	echo " ------------------ 关闭 spark -------------------"
       	"/opt/module/spark-2.4.3/sbin/stop-all.sh"
		sleep 1
		"/opt/module/spark-2.4.3/sbin/stop-history-server.sh"
		echo " ------------------- 关闭 zookeeper --------------------"
		 ssh dss-alone /opt/module/zookeeper-3.5.7/bin/zkServer.sh $1
		echo " =================== 关闭 hadoop集群 ==================="

        echo " --------------- 关闭 historyserver ---------------"
        ssh dss-alone "/opt/module/hadoop-2.7.2/sbin/mr-jobhistory-daemon.sh stop historyserver"
        echo " --------------- 关闭 yarn ---------------"
        ssh dss-alone "/opt/module/hadoop-2.7.2/sbin/stop-yarn.sh"
        echo " --------------- 关闭 hdfs ---------------"
        ssh dss-alone "/opt/module/hadoop-2.7.2/sbin/stop-dfs.sh"
		
		#echo " ------------------- 关闭 dataease -------------------"
		#cd /deployments/
		#sleep 1
		#./my_dataease.sh stop
		#echo " ------------------- 关闭dataX------------------------"
		#cd /opt/module/datax/datax-web-2.1.2
		#sleep 1
		#./bin/stop-all.sh
;;
"status")
    check_process HiveMetastore 9083 >/dev/null && echo "Metastore服务运行正常" || echo "Metastore服务运行异常"
    check_process HiveServer2 10000 >/dev/null && echo "HiveServer2服务运行正常" || echo "HiveServer2服务运行异常"
    ;;
*)
    echo "输入参数有误!"
;;
esac

**高校专业实习管理平台设计与实现** 本设计项目旨在构建一个服务于高等院校专业实习环节的综合性管理平台。该系统采用当前主流的Web开发架构,基于Python编程语言,结合Django后端框架与Vue.js前端框架进行开发,实现了前后端逻辑的分离。数据存储层选用广泛应用的MySQL关系型数据库,确保了系统的稳定性和数据处理的效率。 平台设计了多角色协同工作的管理模型,具体包括系统管理员、院系负责人、指导教师、实习单位对接人以及参与实习的学生。各角色依据权限访问不同的功能模块,共同构成完整的实习管理流程。核心功能模块涵盖:基础信息管理(如院系、专业、人员信息)、实习过程管理(包括实习公告发布、实习内容规划、实习申请与安排)、双向反馈机制(单位评价与学生反馈)、实习支持与保障、以及贯穿始终的成绩评定与综合成绩管理。 在技术实现层面,后端服务依托Django框架的高效与安全性构建业务逻辑;前端界面则利用Vue.js的组件化特性与LayUI的样式库,致力于提供清晰、友好的用户交互体验。数据库设计充分考虑了实习管理业务的实体关系与数据一致性要求,并保留了未来功能扩展的灵活性。 整个系统遵循规范的软件开发流程,从需求分析、系统设计、编码实现到测试验证,均进行了多轮迭代与优化,力求在功能完备性、系统性能及用户使用体验方面达到较高标准。 **核心术语**:实习管理平台;Django框架;MySQL数据库;Vue.js前端;Python语言。 资源来源于网络分享,仅用于学习交流使用,请勿用于商业,如有侵权请联系我删除!
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

我是刘望舒

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值