ruiyiin的专栏

这篇文章算是给自己重新缕清MR下内存参数的含义 Container是什么？ Container就是一个yarn的Java进程，在Mapreduce中的AM，MapTask，ReduceTask都作为Container在Yarn的框架上执行，你可以在RM的网页上看到Container的状态 基础 Yarn的ResourceManger（简称RM）通过逻辑上的队列分配内存，CP

1 前言1.1 读者对象本文档提供大数据平台的详细部署说明，本文的预期读者应拥有以下技能：l 熟练使用linux常用命令，懂shell脚本。l 使用SSH工具连接到Linux环境上进行应用程序的部署l 对网络知识有一定的了解1.2 安装步骤本文档包括以下几个步骤：l 安装前的准备工作，包括软硬件环境检测；l 基础软件的安装；l 基础软件的配置；l 建立数据库对象，包括表、存储过程；l 初始化环境，...

  Ambari rpm包定制                        Hadoop，hive，spark，zookeeper， hbase，phoenix 使用apache版本的安装包进行重新打打包。一、环境准备1、配置rpm编译目录vim ~/.rpmmacros  二、解包和打包1、首先安装rpmrebuildyum install rpmrebuild以zookeeper为例（在安装...