Levent的博客

部署好Hadoop HDFS环境之后，可以通过shell或JavaAPI等方式来操作hdfs中的内容。 Shell方式 shell方式操作在这里不做过多介绍，基本由以下两种操作方式。 1.hdfs dfs -xx 如：hdfs dfs -put /etc/profile / 2.hadoop fs -xx 如：hadoop fs -get /profile Java API方式

在hadooop环境hdfs和yarn都可以正常运行之后，既可以实现一个简单的mapreduce实例程序。 本人使用单机伪分布式部署，启动之后有5个进程，并且50070和8088端口都有web程序在运行。 1.实现Mapper类 /** * Key in 框架读到的一行数据的起始偏移量 * value in 读到的一行数据的内容 * key out 业务逻辑输出的数据key类型