Zookeeper
IT菜籽U
当你发现自己的才华撑不起野心时,就请安静下来学习吧
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
分布式协调框架Zookeeper
一、Zookeeper简介 1、Zookeeper是什么 Zookeeper是Hadoop的正式子项目,它是一个针对大型分布式系统的可靠协调系统,它提供的功能包括:配置维护、名字服务、分布式同步、组服务等。Zookeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。 Ø Zookeeper 是 Google 的 Chubby一个开源的实现,是原创 2015-10-16 18:34:47 · 1453 阅读 · 0 评论 -
编写一个监控Zookeeper的Java程序,可以通过两种方式 :
如果想编写一个监控Zookeeper的Java程序,可以通过两种方式 : (1)通过TelnetClient发送命令 ,命令的详解参考:http://zookeeper.apache.org/doc/trunk/zookeeperAdmin.html#sc_zkCommands (2)通过JMX,说明请参考:http://zookeeper.apache.org/doc/trunk/zooke转载 2016-01-18 16:08:38 · 2852 阅读 · 0 评论 -
zookeeper3.4.5自动清理日志
从3.4.0开始,zookeeper提供了自动清理snapshot和事务日志的功能, 通过配置 autopurge.snapRetainCount 和 autopurge.purgeInterval 这两个参数能够实现定时清理了。 这两个参数都是在zoo.cfg中配置的,将其前面的注释去掉,根据需要修改日志保留个数: autopurge.purgeInte转载 2016-01-25 14:29:52 · 605 阅读 · 0 评论 -
Hadoop 2.0 – HA功能中ZKFC对NN状态的控制
ZKFC进程名称:DFSZKFailoverController Hadoop 2.0 HA架构图: FC是要和NN一一对应的,两个NN就要部署两个FC。它负责监控NN的状态,并及时的把状态信息写入ZK。它通过一个独立线程周期性的调用NN上的一个特定接口来获取NN的健康状态。FC也有选择谁作为Active NN的权利,因为最多只有两个节点,目前选择策略还比较简单(先到先得,轮换)。转载 2016-01-26 17:32:40 · 1436 阅读 · 0 评论 -
通过Sqoop实现Mysql / Oracle 与HDFS / Hbase互导数据
下文将重点说明通过Sqoop实现Mysql与HDFS互导数据,Mysql与Hbase,Oracle与Hbase的互导最后给出命令。 一、Mysql与HDFS互导数据 环境: 宿主机器操作系统为Win7,Mysql安装在宿主机上,宿主机地址为192.168.10.50 3台虚拟机操作系统为CentOS 位 三台虚拟机已成功安装Hadoop,并实现免密钥互访,配hosts为: 192.原创 2016-06-29 19:13:34 · 752 阅读 · 0 评论 -
zokeeper启动异常:Error contacting service. It is probably not running
转载:http://www.aboutyun.com/thread-18791-1-1.html 1.'Error contacting service. It is probably not running.'问题 错误描述: 启动zk时显示启动成功,但是去查询他的状态时发现是没有启动成功的,而且此时日志根本查看不了(只能显示早于此刻的时间日志) 网上看了下'转载 2016-10-10 08:50:46 · 4892 阅读 · 0 评论
分享