不清不慎的博客

一、部署运行HDFS文件系统1.在hadoop的安装目录下有core-site.xml和hdfs-site.xml这两个文件，下面分别配置这两个文件： core-site.xml:<property> <name>fs.defaultFS</name> <value>hdfs://hostname/ip:80...

一、HDFS HA概述在hadoop2.x之前，hadoop集群只有一个namenode，存在单点故障【SPOF】，因此在一个namenode宕机或者该namenode所在的机器需要升级进行处理的时候，就需要停掉服务器，所有的服务都不能工作。因此，在hadoop2.x之后就提出了HDFS HA【High Availability】，HDFS HA通过配置Active/Standby两个name...

Hadoop整合了众多的文件系统，在其中有一个综合性的文件系统抽象，它提供了文件系统实现的各类接口，HDFS只是这个抽象文件系统的一个实例。提供了一个高层的文件系统抽象类org.apache.hadoop.FileSystem。下面我们主要围绕这个抽象类讲解一下常见的文件操作。Hadoop中关于文件操作基本上全部是在“org.apache.hadoop.fs”包中，这些API能够支持的操作包含...