zhou_zhao_xu的博客

以下命令均需要在hadoop目录下运行：即当前所在目录下有bin目录，bin目录中有hdfs这个二进制文件。lsbin/hdfs dfs -ls /列出hdfs文件系统根目录下的目录和文件bin/hdfs dfs -ls -R /列出hdfs文件系统所有的目录和文件putbin/hdfs dfs -put < local file > < hdfs file >hdfs file的父目录一定要存在，否则命令不会执行 bin/hdfs dfs -put

文章目录一、架构二、HDFS HA1)基础环境准备（1）配置主机名和IP的映射关系（2）关闭防火墙 禁用防火墙（3）同步时钟（4）配置SSH 免密登陆（5）Java 环境2）ZK集群启动3）安装配置Hadoop（1）解压配置环境变量（2）配置core-site.xml（3）创建机架脚本（4）创建机架映射文件（5）配置 hdfs-site.xml（6）编辑slaves信息（7）启动1）启动HDFS服...

一、概述1.1 大数据概念大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。1.2 大数据面临的问题存储：单机存储有限，需要使用集群（多台机器）存储数据；硬件上必须有足够的存储容量，软件上有对应的容灾机制。分析：单机算力有限，也需要使用集群进行计算（需要在合理的时间内将数据变废为宝）1.3 大数据的特点4V Volume 数...