- 博客(3)
- 收藏
- 关注
原创 # HDFS+MapReduce+Yarn详解
HDFS详解 1.HDFS 介绍 HDFS 是 Hadoop Distribute File System 的简称,意为:Hadoop 分布式文件系统。是 Hadoop 核心组件之一,作为最底层的分布式存储服务而存在。分布式文件系统解决的问题就是大数据存储,他们是横跨在多台机器上的存储系统。分布式文件系统在大数据时代有着广泛的应用前景,他们为存储和处理超大规模数据提供所需的扩展能力 1.1 HDFS 特性 hdfs是一个分布式的文件系统,用于存储文件,通过统一的命名空间目录树来定位文件; 采用 mast
2020-05-14 21:06:10
691
原创 Hadoop高可用(HA)集群的搭建
Hadoop高可用(HA)集群的搭建 参考上一篇博客来搭建Hadoop高可用(两个namenode,两个resourcemanager) ↓↓↓ Hadoop的伪分布式搭建及zookeeper的搭建 1、首先启动zookeeper集群(三台机器都执行) cd /usr/local/src/zookeeper-3.4.5 bin/zkServer.sh start 2、进入Hadoop配置文件目...
2020-05-05 15:06:49
354
原创 Hadoop+zookeeper集群环境搭建步骤(百分百安装,亲测有效)
Hadoop+zookeeper集群环境搭建步骤(百分百安装,亲测有效) 使用的软件 hadoop-2.7.5 zookeeper-3.4.5 安装hadoop,需要多台机器构建集群(最少3台) 这里我使用三台机器搭建hadoop伪分布式集群以及zookeeper 主机名 ip地址 bigdata1 192.168.100.7 bigdata1 192.168.100.8 ...
2020-05-05 14:30:56
4332
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅