Mapreduce学习：mapper类中的4个泛型参数解析

最新推荐文章于 2025-06-22 21:45:06 发布

RUFFIANTDD

最新推荐文章于 2025-06-22 21:45:06 发布

阅读量7.6k

点赞数 5

CC 4.0 BY-SA版权

分类专栏：个人练习文章标签： MapReduce

本文链接：https://blog.youkuaiyun.com/weixin_43020359/article/details/83548066

个人练习专栏收录该内容

10 篇文章

订阅专栏

本文深入解析MapReduce中FlowCountMapper类的实现原理，详细介绍了四种数据类型的作用：LongWritable、Text、Text和FlowBean。同时，文章还阐述了如何通过重写Mapper方法来处理输入数据，并解释了Context对象在数据返回过程中的作用。

先看代码

public class FlowCountMapper extends Mapper<LongWritable, Text, Text, FlowBean>{
}

1、LongWritable：表示worder传入KEY的数据类型，默认是一行起始偏移量
2、Text：表示worder传入VALUE的数据类型，默认是下一行的文本内容
3、Test：表示自己map方法产生产生的结果数据类型KEY
4、FlowBean:表示自己map方法产生的结果数据的VALUE类型

重写Mapper方法

@Override
protected void map(LongWritable key, Text value, Mapper<LongWritable, Text, Text, FlowBean>.Context context)throws IOException, InterruptedException {
}
//Mapper<LongWritable, Text, Text, FlowBean>.Context context 表示上下文工具，用于将数据返回worker

map（）被 map task 调用，每读一行调用，将这一行偏移量传入参数key，内容传入参数value