Sky

       最近几天在虚拟机上部署hadoop，部署好了之后在slave的两个节点上面jps无法查看到datanode进程，最后用了笨方法，问题解决了。       我是基于VMware  workstation 9安装的三台rh Linux虚拟机，一主两从分别对应：       192.168.1.100  master       192.168.1.101  node1     ...

问题导读： 1、什么是yarn？ 2、Yarn 和MapReduce相比，它有什么特殊作用 ？  背景        Yarn是一个分布式的资源管理系统，用以提高分布式的集群环境下的资源利用率，这些资源包括内存、IO、网络、磁盘等。其产生的原因是为了解决原MapReduce框架的不足。最初MapReduce的committer们还可以周期性的在已有的代码上进行修改，可是随着代码的增加以及...