hadoop虚拟机没有ens33

在学习RabbitMQ时,因为前一天晚上hadoop虚拟机关闭不当,第二天使用xshell连接虚拟机时连接失败,使用ifconfig查看的时候,发现没有ens33,尝试了很多方法都不行,最后通过下面的方法成功了:
前提是你的NetworkManager是开启的,开启的命令是:

systemctl start NetworkManager

1.输入一下命令:

nmcli n

如果是disabled则执行第二步,如果不是,则该篇文章的解决方法应该不能够解决这个问题
2.输入以下命令:

nmcli n on

然后输入ifconfig这时候就可以看到ens33又出现了。

### 三台虚拟机上搭建和配置 Hadoop 集群 #### 虚拟机创建与网络设置 为了构建 Hadoop 集群,首先需要准备三台虚拟机。下载所需的操作系统镜像源并完成虚拟机的初始化工作[^1]。随后,在每台虚拟机中分配独立的静态 IP 地址以便于稳定通信。通过编辑 `/etc/sysconfig/network-scripts/ifcfg-ens33` 文件来设定静态 IP 设置[^2]。 #### SSH 免密登录配置 为了让节点间能够高效协作,需在各虚拟机之间建立无密码认证机制。具体操作如下: 1. 在主节点(NameNode)生成公钥私钥对: ```bash ssh-keygen -t rsa ``` 2. 将生成的公钥分发至其他两台从节点(DataNodes),以及本机回环地址: ```bash ssh-copy-id user@slave1_ip ssh-copy-id user@slave2_ip ``` #### Java 环境变量配置 Hadoop 运行依赖 JDK 支持,因此必须先确认所有机器均已安装适当版本的 Java 并正确设置了 `JAVA_HOME` 变量。可以通过修改 `$HADOOP_HOME/etc/hadoop/hadoop-env.sh` 文件中的路径指向实际安装位置[^3]: ```bash export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64 ``` #### 修改核心配置文件 进入 Hadoop 的配置目录后调整以下几个主要参数文件的内容以适应多节点部署需求: 1. **core-site.xml**: 定义默认存储位置及临时数据存放点。 ```xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://namenode_host:9000</value> </property> </configuration> ``` 2. **hdfs-site.xml**: 设定副本数量以及其他磁盘管理选项。 ```xml <configuration> <property> <name>dfs.replication</name> <value>2</value> </property> </configuration> ``` 3. **mapred-site.xml**: 明确 MapReduce 框架使用的资源调度器类型。 ```xml <configuration> <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property> </configuration> ``` 4. **yarn-site.xml**: YARN 相关服务端口定义及其他高级特性启用开关。 ```xml <configuration> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property> </configuration> ``` 最后一步是在 slaves 列表里填入 DataNode 主机名或者 IP 地址列表,保存退出即可。 #### 启动集群验证状态 当上述准备工作完成后就可以依次启动各个组件的服务进程了。通常情况下按照以下顺序执行命令脚本来激活整个分布式计算框架: ```bash start-dfs.sh && start-yarn.sh jps # 查看当前 JVM 上运行的所有 java process 来判断是否成功开启 NameNode, SecondaryNameNode 和 NodeManager. ``` 如果一切正常,则可以尝试提交测试作业到这个新建好的伪分布模式下的 mini-cluster 中去检验其功能表现如何。 ---
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值