零基础大数据

一、大数据的4V特征 Volume 数据量大 TB PB Varity 的数据多种多样文本（.log .txt .sql .xml） Veracity 价值密度低 商业价值高 Velocity 速度快 二、Hadoop 的概念 Hadoop是一个应用java语言实现的软件框架， 可扩展的分布式并行计算框架， 它可以让应用程序支持上千个节点和PB级别...

一、HDFS深入 1、namenode 和 datanode功能 【namenode】 接收用户操作请求 管理文件与block之间关系， block与datanode之间关系 namenode管理：namenode支持对HDFS中的目录、文件和块做类似文件系统的创建、 修改、删除、列表文件和目录等基本操作。 块存储管理 在整个HDFS集群中有且只有唯一一个处于active状态nameno...

【安全模式 safemode】 3种方式 方式一：Namenode的一种状态，启动时会自动进入安全模式，在安全模式，文件系统不 允许有任何修改，“只读不写”。目的，是在系统启动时检查各个DataNode上数据的有 效性。 方式二： //手动进入安全模式 bin/hdfs dfsadmin -safemode enter //手动离开安全模式 $ bin/h...