hadoop开发第二步

                                                     伪分布式运行wordcount

hadoop安装文件在/home/hadoop下
wordcount例子在hadoop/share/hadoop/mapreduce/下

可在localhost:50070查询

在.bashrc文件中配置了环境变量后,可以直接在/home/hadoop路径下运行下列命令(即直接打开终端就可运行命令)

即在hdfs的/目录下生成input目录

hadoop fs -mkdir /input

查询生成的文件目录

hadoop fs -ls /

生成两个本地文件

echo "hello world"> file01
echo "hello adu">file02
上传文件到hdfs上/input目录中
hadoop fs -copyFromLocal file0* /input
执行wordcount
hadoop jar /home/hadoop/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.9.0.jar wordcount input output
完成后,查看那结果:
hadoop fs -ls
hadoop fs -cat output/part-r-00000


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值