一键脚本启动集群：可能错误 ssh

最新推荐文章于 2024-08-12 17:29:27 发布

原创最新推荐文章于 2024-08-12 17:29:27 发布 · 265 阅读

0 ·

CC 4.0 BY-SA版权

hadoop中遇到的系列问题专栏收录该内容

2 篇文章

订阅专栏

本文详细解析了一键脚本启动集群时SSH配置的重要性，指出仅配置SSH可能不足以解决环境变量加载的问题。文章强调了脚本执行时只会加载用户环境变量而不会加载系统环境变量，提出了解决方案：将系统环境变量追加到用户环境变量中，确保集群启动的一致性和稳定性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

集群在一键脚本启动时：需要配置ssh,但只是配置ssh可能也还不够，

因为脚本在执行ssh时，不会加载被ssh的机器上的系统环境变量 source /etc/profile

但是它会加载用户的环境变量 source ~/.bashrc (/home/admin/.bashrc)

所以我们可以把系统中的环境变量追加到用户的环境变量中去：

cat /etc/profile >> ~/.bashrc

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

stupid_Qiu

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

165.Hadoop（二）：集群配置，启动并测试，脚本一键启动、一键查看，集群时间同步

鹏哥哥Aaa

05-27

314

集群配置，启动并测试，脚本一键启动、一键查看，集群时间同步

Zookeeper集群设置一键启动/一键停止脚本

wzc8961661的博客

03-17

3622

学习目标设置一键启动 Zookeeper 脚本设置一键停止 Zookeeper 脚本设置一键启动 Zookeeper 脚本进入目录 cd /export/servers/zookeeper-3.4.5-cdh5.14.0/bin/ 编写一键启动配置文件 vim zkStart-all.sh for host in node01 node02 node03 do ssh $ho...

参与评论您还未登录，请先登录后发表或查看评论

HadoopHA集群批量启动脚本

04-11

HadoopHA集群批量启动脚本HadoopHA集群批量启动脚本HadoopHA集群批量启动脚本HadoopHA集群批量启动脚本

集群群起脚本

热门推荐

小杨的技术博客

04-27

2万+

ZK集群群起 #!/bin/bash for i in root@hadoop102 root@hadoop103 root@hadoop104 do echo "============== $i ================" ssh $i '/opt/module/zookeeper-3.4.10/bin/zkServer.sh start' done 集群jps查询 ...

一键启动集群脚本

App20134833944的博客

10-16

556

Hadoop一键启动集群脚本

zk集群不能通过ssh脚本群起问题

Sixkd的博客

01-18

246

linux群起群闭脚本没用 ssh没用感觉是公钥私钥出了问题，创建完不xsync就还好，分配之后就没用了我也不晓得为什么但是不分配就好

Hadoop | 集群配置（四）启动测试完全分布式集群 | 编写 Shell 脚本一键启动集群 | Hadoop 集群常用脚本

希望每天都能进步一点点

01-16

807

参考资料视频资料运行环境 windows10 CentOS 7 虚拟机 JDK8 Hadoop3.1.3 3个集群节点一、集群的不同启动方式 1.1 各模块分开启动（常用）（1）各个模块分开启动/停止（配置ssh是前提）常用整体启动/停止 HDFS start-dfs.sh/stop-dfs.sh （2）整体启动/停止YARN start-yarn.sh/stop-yarn.sh 1.2 各个服务组件逐一启动/停止（1）分别启动/停止HDFS组件 hdfs --daemon s

k8s集群一键部署脚本-适用于centos

01-21

python语言结合ansible-playbook编写，大家...使用前提：执行脚本的机器上安装有ansible，配置好ansible到其他机器的ssh免密登录；执行脚本的机器上提前安装好python3；如遇到问题私信我，我看到消息一定会解答！！！

【Kafka-一键启动脚本】自定义shell脚本实现Kafka一键启动

weixin_53543905的博客

03-16

976

【代码】【Kafka-一键启动脚本】自定义shell脚本实现Kafka一键启动。

shell编程：集群多主机一键启停服务脚本

最新发布

m0_60125201的博客

08-12

844

shell编程解决服务多主机一键启动脚本

ZooKeeper集群启动停止脚本

m0_58524181的博客

09-23

1350

Zookeeper集群启动与停止脚本

hadoop群起脚本

qq_43523503的博客

11-06

747

hadoop群起脚本 #!/bin/bash if [ $# -lt 1 ] then echo "No Args Input..." exit ; fi case $1 in "start") echo " =================== 启动 hadoop集群 ===================" echo " --------------- 启动 hdfs ---------------" ssh hadoop102 "/o

shell脚本实现一键启动集群的zookeeper和hadoop

Token

03-18

1819

因为我的集群是高可用的，所以基本上都是和zookeeper整合的。然而zookeeper的启动又需要一个机器一个机器的启动，非常麻烦。所以我就产生了写一个shell脚本来启动集群。不说废话，直接上脚本。 #!/bin/bash #一键启动集群 for i in {"hadoop01","hadoop02","hadoop03"}; do echo "-----$1 $i zookeeper-...

【Hadoop集群】-集群搭建踩的那些坑之ssh篇

航帆远洋

12-05

3446

用hadoop搭建的集群在启动时子节点一直无法连接到主节点，在使用hadoop集群时一直报错，也就是集群并没有搭建成功，导致了出现了上面的报错信息org.apache.hadoop.ipc.Client: Retrying connect to server: hadoop-master/192.168.1.130:9000. Already tried 0 time(s); ret...

解决 Zookeeper集群启动失败，提示 Error contacting service. It is probably not running.

一名准程序员

08-10

2210

刚学到zookeeper 记录一下出现的错误，死活开启不了服务，经查阅后发现是防火墙问题。（关闭防火墙命令在文章底部）如果设置了SSH免密登录则在zoo.cig中如下设置; 如果没有设置ssh免密登录，把“=”后面设置为IP:通信端口号:选举端口号即可(文章底部有一个连接，搭建集群的方式是IP的方式) [root@slave2 zookeeper-3.4.14]# vim co...

Hadoop集群启动和关闭脚本

BIPT919的博客

04-24

6382

文章目录Hadoop集群启动关闭脚本一、Hadoop集群启动脚本1.在cd $HADOOP_HOME路径下创建jiqunstart.sh文件。二、Hadoop集群关闭脚本1.同理在cd $HADOOP_HOME路径下创建jiqunstop.sh文件。三、运行两个脚本1.脚本运行成功后，打开50070查看集群是否启动成功2.可能遇到的问题 Hadoop集群启动关闭脚本 1.首先我们知道在启动Hadoop命令时，我们是 start-dfs.sh→start-yarn.sh →mr-jobhistory-da

linux服务器无法ssh怎么解决,linux服务器有可能无法连接ssh

weixin_33638349的博客

04-30

4318

新安装的linux服务器有可能无法连接ssh，这可是怎么办？我的服务器是centOS6.9的版本1、首先关闭 SELINUXvi /etc/selinux/config#SELINUX=enforcing#注释掉#SELINUXTYPE=targeted#注释掉SELINUX=disabled#增加:wq#保存退出setenforce 0#立即生效2、检查防火墙是否启动service ...

Hadoop集群启动常用脚本

mischen520的博客

05-05

721

启动hadoop命令：在Hadoop102 上执行 /opt/module/hadoop-3.1.3/sbin/start-dfs.sh （启动 hdfs）在Hadoop103 上执行 /opt/module/hadoop-3.1.3/sbin/start-yarn.sh （启动 yarn）在Hadoop102 上执行 /opt/module/hadoop-3.1.3/bin/mapred --daemon start historyserver （启动 historyserver）...

ssh zookeeper集群无法启动的排查

m1913843179的博客

12-25

260

1、我们看下zookeeper.out内容报错，显示java命令找不到，我们执行下面命令ssh 然后再执行which java，也发现找不到 [hadoop@ruozedata001 ~]$ ssh hadoop001 “which java” which: no java in (/usr/local/bin:/usr/bin) 2、存在的问题：那可以推断出环境变量没有加载 3、问题解...