m0_43437949的博客

1. Hadoop的高可用性1.1. 问题引入对于单一的namenode1或者联邦（Federation）HDFS2无法解决单点失效问题。如果namenode失效了，那么会造成所有客户端，包括MapReduce作业，均无法读写和列举文件。1.2. 新的namenode响应服务的条件现在来考虑一下如果旧的namenode失效后，启动一个新的namenode需要满足什么条件？  假设...

Hadoop的数据类型在学习了Hadoop的基本架构以后,就可以试着编写Map和Reduce的来处理数据但是,编写之前我们需要来了解一下Hadoop的基本数据类型1. 为什么Hadoop有自己的数据类型  hadoop由各个节点构成一个集群，分布式储存就要考虑到数据在节点之间来回传递的问题。为了解决这一问题，hadoop采用了java中的序列化和反序列化概念1。在Hadoop中，位...

1.下载hadoop，https://hadoop.apache.org/releases.html不想自己编译就下载Binary download（不过编译也就是一个命令的事）2.JAVA JDK的选择与安装吐槽一下：网上那些教程都是什么鬼，一点都不细节（花了我整整一天的时间）,也是因为我太菜了1.安装java8（就安装java8，不要整那些花里胡哨的）安装其他版本可能用不了hado...