- 博客(4)
- 收藏
- 关注
原创 Hadoop Archives指南
Hadoop Archives指南概述 Hadoop archives是一种归档文件。按照官网的说法,一个Hadoop archive对应一个文件系统目录。 那么为什么需要Hadoop Archives呢?因为hdfs并不擅长存储小文件,文件在hdfs上以block的形式存储,而这些block会在namenode中保存其索引等元数据,这些元数据在namenode启动后被加载至内存。如
2017-08-08 19:29:48
701
原创 Hadoop配置说明
Hadoop有两类配置文件,默认的default-site.xml和可以修改的site.xml,除此之外,还可以通过env.sh设置参数,同时env.sh也用于配置一些环境变量。
2017-07-24 22:05:00
652
原创 zkCli的使用
在上一篇博客中,简单的介绍了zookeeper的原理,概念和常用的场景。zookeeper是分布式系统应用,大数据云计算平台中相当关键的服务,应用非常广泛,因此掌握常用的使用命令是有必要的。本片博客简单的介绍了zkCli的使用,由于zookeeper类似文件系统的特性,因此,zkCli的操作也类似文件系统中的常用操作: 增删改查、资源管理、权限控制等等。本文就是从这些方面进行介绍。建立会话连接zkC
2017-04-08 01:41:34
18957
3
原创 zookeeper入门原理
zookeeper入门原理近年来,分布式应用越来越广泛,不可避免的要涉及节点之间的同步及协调方面的问题,因此需要一种可靠的、高效的协调机制来统一分布式系统的状态。zookeeper正式分布式系统上解决这类问题的利器。本文简单的说明了zookeeper的原理和应用场景,然后简单的介绍了zkCli的使用:zookeeper的概述典型的应用场景zookeeper的基本概念zookeeper的概述介
2017-04-08 00:05:26
615
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人