Hadoop实现词频统计

词频统计就是统计文件每个单词的出现次数

一、步骤

1.首先需要关闭防护墙，因为虚拟机的防火墙会阻碍用户从本地计算机的浏览器访问hadoop提供的web ui

2.在个人计算机的hosts文件中添加集群服务的ip映射

3.分别在本地计算机的浏览器中输入http://bxm02:9870和http://bxm02:8088查看hdfs和yarn的运行状态

 

4.准备一个名为word.txt的文本文件

5.在hdfs上创建目录，然后将word.txt上传到wordcount/input目录，并查看是否上传成功

6.运行mapreduce程序

7.查看统计结果