www_jun的专栏

虚拟机下两台机器一个master一个slave，hadoop启动后master

1. 目的 本文描述了hadoop中的公平调度的实现算法，公平调度器是由facebook贡献的，适合于多用户共享集群的环境的调度器，其吞吐率高于FIFO，论文参见参考资料[1]。本文分析的Hadoop版本是0.20.2，在新版本（0.21.0）中，公平调度算法已经有了改进与增强。本文组织结构如下：1）目的    2）公平调度介绍  3）公平调度算法分析 4）新版hadoop中公平调度

远程hadoop2.7，本地的windows7 程序报错如下： 2015-09-28 22:04:21,423 WARN  [main] util.NativeCodeLoader (NativeCodeLoader.java:(62)) - Unable to load native-hadoop library for your platform... using builtin-java

capacity-scheduler能力调度器 1.  添加用户组dwgroup（集群中的namenode主备机器都要做以下操作） groupadd dwgroup           //添加用户组 useradd -G  dwgroup 用户//将用户加到dwgroup用户组里   2.  yarn-site.xml 新增配置 yarn.resourcemanager

欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦： Markdown和扩展Markdown简洁的语法 代码块高亮 图片链接和图片上传 LaTex数学公式 UML序列图和流程图 离线写博客 导入导出Markdown文件 丰富的快捷键 快捷键 加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl