floatingmaple的博客

原创 Hadoop负载均衡问题处理记录

1、现象： 总共10台机器，其中2台机器磁盘使用率达到80%以上，其他机器使用率不到60%。通过du -sh查看，发现是2台机器的hdfs文件比较大。 想通过删除hive里面在大数据表，来降低磁盘使用率，发现其他机器的磁盘使用率有所下降，但是这两台问题的结点不降反升(有实时数据写入)。这时怀疑是hdfs文件系统有问题。 2、处理方式一： 通...