
Hadoop
Du_咳咳
目前就职于百度,方向是分布式存储、大数据基础架构
展开
-
HDFS Everywhere——RDBMS on HDFS
关系型数据库和HDFS的结合**目录** 作业选题: – 题目: – 摘要: – 背景: 思路和计划: – 目标: 分工: 已有解决方案: – Sqoop: Solution: sqoop与loading对比: 作业选题:– 题目: HDFS Everywhere——RDBMS on HDFS– 摘要: 组合RDBMS和HDFS,实现新的性原创 2015-06-25 16:47:32 · 1130 阅读 · 0 评论 -
HBase集群安装
HBase集群搭建目录: 一、准备工作 二、搭建HBase注意要点 三、HBase集群搭建流程 四、集群操作顺序 五、配置参考一、准备工作 首先建立信任关系,ssh互联,或者修改官方脚本建立pssh。Hadoop、Zookeeper、Hbase集群搭建的过程中,只需要在master配好,scp或者pscp到其他机器即可,但是Zookeeper集群不同节点需要针对性的修改myid,有不同的原创 2016-03-29 17:27:16 · 1121 阅读 · 0 评论 -
分布式集群监控方案
一、调研背景 XGboost on Yarn已正式接入流量,目前需要对XGboost集群进行有效监控。为了保证系统的稳定性,可靠性,可运维性。 掌控集群的核心性能指标,了解集群的性能表现; 集群出现问题时及时报警,便于同学及时修复问题; 集群重要指标值异常时进行预警,将问题扼杀在摇篮中,不用等集群真正不可用时才采取行动; 当集群出现问题时,监控系统可以帮助我们更快的定位问题和解决问题。二、原创 2017-11-28 16:24:39 · 5752 阅读 · 0 评论