Hadoop
关注
分享
扫一扫
hello_小杰
这个作者很懒，什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
hadoop 2.x linux平台源码编译
hadoop 2.x 源码编译步骤原创 2016-12-22 09:51:04 · 609 阅读 · 2 评论 -
hadoop 2.x 集群搭建
集群简介HADOOP集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起HDFS集群：负责海量数据的存储，集群中的角色主要有NameNode / DataNode(还有)YARN集群：负责海量数据运算时的资源调度，集群中的角色主要有 ResourceManager /NodeManager使用4个节点打架,角色分配如下:原创 2016-12-26 10:36:13 · 788 阅读 · 1 评论 -
eclipse 导入hadoop源码
下载hadoop源码a. 进入hadoop的下载镜像地址进行下载https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 选择需要下载的版本点击下载,下载后,解压(我解压到E盘下)安装JDK(建议使用1.7版本)a. 如果已经有了jdk就可以跳过此步骤。b.原创 2016-12-29 10:13:43 · 3778 阅读 · 2 评论 -
Hadoop 的HA机制
正式引入HA机制是从hadoop2.0开始，之前的版本中没有HA机制HA的运作机制（1）hadoop-HA集群运作机制介绍所谓HA，即高可用（7*24小时不中断服务）实现高可用最关键的是消除单点故障hadoop-ha严格来说应该分成各个组件的HA机制——HDFS的HA、YARN的HA （2）HDFS的HA机制详解通过双namenode消除单点故障原创 2017-01-12 15:02:35 · 1563 阅读 · 1 评论 -
Hive 的安装
1.下载Hive首先在官网(http://hive.apache.org/)上下载hive的安装包,点击左侧的Dowloads点击Download a releasenow,进入提供下载的镜像地址选择版本后下载软件和源码1.上传安装包导服务器上传安装包后，解压到指定目录tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /原创 2017-01-12 15:59:24 · 512 阅读 · 0 评论