Small_temper的博客

hdfs hdfs三台服务器节点配置: 各节点说明： namenode ：HDFS的守护进程，负责维护整个文件系统，存储着整个文件系统的元数据信息，有image+edit log ，namenode不会持久化存储这些数据，而是在启动时重建这些数据。 datanode：是具体文件系统的工作节点，当我们需要某个数据，namenode告诉我们去哪里找，就直接和那个DataNode对应的服务器的后台进程进行通信，由DataNode进行数据的检索，然后进行具体的读/写操作 secondarynamen

可以使用 hdfs fsck / 确定哪些文件有问题。查看输出中是否有丢失或损坏的块（暂时忽略复制不足的块）。该命令特别冗长，尤其是在大型HDFS文件系统上，因此我通常会深入了解 hdfs fsck / | egrep -v '^\.+$' | grep -v eplica 它忽略了只有点和线谈论复制的线。 hdfs fsck /path/to/corrupt/file -locatio...