初学耗时:0.5h
注:优快云手机端暂不支持章节内链跳转,但外链可用,更好体验还请上电脑端。
一、Hadoop基准测试
1.1 测试写入速度。
1.2 测试读取速度。
1.3 清除测试数据。
1.4 基准测试参考。
记忆词:
hdfs dfs -text
一、Hadoop基准测试
- 实际生产环境当中,hadoop的环境搭建完成之后,第一件事情就是进行压力测试,测试我们的集群的读取和写入速度,测试我们的网络带宽是否足够等一些基准测试。
1.1 ~ 测试写入数据。
- 向HDFS文件系统中写入数据,10个文件,每个文件10MB,文件存放到/benchmarks/TestDFSIO中。
hadoop jar /export/servers/hadoop-2.6.0-cdh5.14.0/share/hadoop/mapreduce/hadoop-mapreduce-client-jobcl