喜讯XiCent 的博客

之前有人问我，“我放了一个***.avi在linux服务器上，你肯定找不到嘻嘻”。登上去发现etc文件夹大了好几个G。。。。 你4不4撒，你为什么不把avi切成多块，放到不同服务器上，这谁能发现呢？？ 1. HDFS前言 上面开个玩笑，hdfs实际上不是让我们当作网盘来使用的。 ● 设计思想 ○ 分而治之:将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据...

背景 根据我们之前搭建的hadoop集群，都只有一个namenode，一个resourcemanager。一旦namenode挂了，整个hdfs就废了，因为namenode负责着元数据信息的管理，响应客户端。 如果是resourcemanager挂了，那么yarn也是废了，无法尽心资源调度，没办法跑mapreduce,spark等运算框架。 这种情况下就急需一个高可用的hadoop集群 前提 ...