
Hadoop
cfy_yinwenhao
这个作者很懒,什么都没留下…
展开
-
HADOOP 磁盘满
由于hadoop集群的机器磁盘容量大小不等,造成磁盘使用率不同,有的使用了10%,而有的已经100%,这个对整个系统的运行是有问题的。 暂时还没有找到控制磁盘使用率的参数,可以通过hadoop命令行来手动调节磁盘的使用情况。 > hadoop balancer -Threshold 20 或者 sh $HADOOP_HOME/bin/start-balancer.sh –t原创 2012-01-11 11:35:17 · 2188 阅读 · 0 评论 -
hbase hbck工具
-fix Try to fix region assignments. This is for backwards compatiblity-fixAssignments Try to fix region assignments. Replaces the old -fix-fixMeta Try to fix meta problems. This assumes HDFS regio转载 2013-11-07 23:16:46 · 734 阅读 · 0 评论 -
Hadoop 2.0 + hive + hbase 安装手记
在Centos6.2部署Hadoop2.0+HIVE+HBASE,相比之前的老版本,新版本的安装还是要更繁琐一些,具体表现在要从众多的配置文件里找出关键的配置项,配置合理的值。 这里有2个难题,第一个是找出关键配置项实在是件费力的事情,有的是操作系统的配置,比如虚拟内存的配置过小会导致outofmemory,系统的nproc和nofile设置,还有环境变量设置,特别是众多的hadoop+hi原创 2013-11-07 23:33:07 · 641 阅读 · 0 评论