- 博客(3)
- 收藏
- 关注
RSS订阅原创 java 内部类总结
学习和使用java语言已经有相当长一段时间了，一直对java中内部类的概念、作用、调用方法、作用域等几个基本概念模糊不清以至于在某些场合和应用场景显得一知半解。今天抱着学习的目的重新整理java内部类。 一、什么叫内部类 在Java中，可以将一个类定义在另一个类里面或者一个方法里面，这样的类称为内部类。内部类作为外部类的一部分，依附于外部类而存在的。 ...
2019-01-23 11:10:23
198
原创 hadoop hdfs 解决磁盘间数据不均衡问题
一、引起磁盘倾斜不均衡的可能原因有哪些 （1）扩容节点，向集群中添加新的数据节点 （2）数据节点之间的磁盘大小不一致 二、磁盘倾斜引起的性能问题 （1）MR程序无法很好地利用本地计算的优势 （2）机器之间无法达到更好的网络带宽使用率 （3）机器磁盘无法利用 通过以下脚本可以解决磁盘间数据拷贝以实现磁盘间均衡 #!/bin/bash src=$1 dest=$2 top=$3 ...
2019-01-09 17:23:48
3130
1
原创 hadoop HA 简单运维 命令
一：数据上传至hdfshadoop fs -moveFromLocal /var/url_data/20150806.txt /url_data/input二：运行jar包处理数据hadoop jar /root/run_jar/url_deal.jar三：移动数据处理结果至hive数据目录下hadoop fs -mv /data/tmp_data/20150831/part-r-00000 /d...
2018-07-02 17:02:08
639
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人