
Hadoop
文章平均质量分 71
ai低吟浅唱
这个作者很懒,什么都没留下…
展开
-
三节点hadoop平台的搭建
由于项目需要使用hadoop的docker环境,所以整理自己以前在VM上面部署的hadoop的文档,回顾一下。1. 配置VMware网络选择NAT模式2. 设置Hadoop用户并赋予sudo权限sudo suaddgroup hadoopsudo adduser -ingroup hadoop hadoopchmod u+w原创 2017-05-10 11:24:01 · 566 阅读 · 0 评论 -
Kubenetes 创建管理hadoop的docker容器的RC和service.yaml文件
安装准备操作参考之前的博文。创建hadoop的rc文件:apiVersion: v1kind: ReplicationControllermetadata: name: hadoop-rcspec: replicas: 3 selector: name: hadoop-pod template: metabata: labels:原创 2017-05-19 11:04:30 · 1073 阅读 · 0 评论 -
Apache Hadoop YARN简介
Apache Hadoop YARN (Yet Another Resource Negotiator,另一种资源协调者)是Hadoop2.0中的资源管理器,它是一个通用资源管理系统,可为上层应用提供统一的资源管理和调度,它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。YARN的基本思想是将JobTracker的两个主要功能(ResourceManageme原创 2017-07-17 15:46:39 · 1062 阅读 · 0 评论