【每日运维】文件系统损坏:shutting down filesystem

问题场景:服务器突发断电导致

在这里插入图片描述

处理步骤

  1. 先确认属于哪个逻辑卷:ls -l /dev/mapper
    在这里插入图片描述
  2. 通过文件系统命令进行修复:xfs_repair -L /dev/mapper/centos-root
    在这里插入图片描述
  3. 最终修复的预期效果如下:
    在这里插入图片描述
  4. 重启服务器后验证是否正常进入系统
    在这里插入图片描述
### Hadoop NameNode SHUTDOWN_MSG 解决方案 当遇到 `SHUTDOWN_MSG` 提示时,通常意味着 NameNode 已经正常关闭或者由于某些配置错误而无法继续运行。以下是针对该问题的具体分析和解决方案: #### 1. 检查是否重复格式化 NameNode 如果之前已经格式化过 NameNode 并运行过 Hadoop 集群,则再次尝试格式化可能会失败[^1]。这是因为之前的 VERSION 文件仍然存在,导致冲突。 - **解决方法**: 删除旧的 VERSION 文件后再重新格式化。 ```bash rm -rf /path/to/namenode/data/version/* hdfs namenode -format ``` 上述命令中的 `/path/to/namenode/data/version/*` 是指存储 NAME_NODE 数据的实际路径,请根据实际配置替换为正确的目录位置。 --- #### 2. 修改核心站点配置文件 core-site.xml 确保 `core-site.xml` 中的相关参数已正确设置[^3]。特别是以下几个关键属性: - `fs.defaultFS`: 定义默认文件系统的 URI。 - `hadoop.tmp.dir`: 设置临时数据存储的位置。 以下是一个典型的 `core-site.xml` 配置示例: ```xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> <property> <name>hadoop.tmp.dir</name> <value>/home/hadoop/tmp</value> </property> </configuration> ``` 确认这些值与当前环境匹配,并保存更改后的文件。 --- #### 3. 确认 DataNode 和 NameNode 的日志记录 通过检查 NameNode 和 DataNode 日志来定位具体原因。日志文件一般位于 `${HADOOP_LOG_DIR}` 下,默认情况下可能是 `/var/log/hadoop/` 或者自定义的日志路径。 重点查找是否有类似于权限不足、端口占用或其他异常的信息。 --- #### 4. 启动集群并验证状态 完成以上操作后,按照标准流程启动整个 Hadoop 集群[^4]。可以通过以下命令依次启动服务: ```bash start-dfs.sh jps ``` 使用 `jps` 命令检查 Java 进程列表中是否存在 NameNode 和 DataNode 实例。如果没有发现对应的进程号,则说明仍有未解决问题。 另外,在浏览器访问 Web UI 地址 (http://localhost:50070/) 来进一步核实 DFS 是否处于健康工作状态。 --- #### 5. 清理残留数据 假如多次尝试均告失败,考虑彻底清理所有节点上的历史数据再重试初始化过程。这包括但不限于删除原有 data 和 logs 目录下的内容。 ```bash rm -r /home/hadoop/name* stop-all.sh && start-all.sh ``` 务必小心执行此类指令以免误删重要资料! --- ### 总结 综上所述,处理 Hadoop NameNode 关闭消息的关键在于排查配置不当之处以及妥善管理本地磁盘资源。遵循本文提到的各项措施能够有效恢复系统功能。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值