超级会员免费看
本文详细介绍了Hadoop3.x中MapReduce的FlowMapper实现，讲解了如何处理输入数据，包括从Text类型转换为String，分割数据获取手机号、上行流量和下行流量。通过从后向前查找确定字段位置，确保正确提取所需信息。最后，使用自定义的FlowBean进行序列化，并计算总流量。同时提到了在设置总流量时需要注意的顺序问题。
然后我们再来看,我们去实现这个FlowMapper这个类,
去继承mapper 这个类,然后
这里我们的参数要考虑好,mapper的输入,我们说是,一行数据,那么输入的key,value,就是
key是行号,偏移量
value是输入的一行是内容是Text
然后mapper的输出的key,value是是
key是Text 是手机号,我们说
value是我们自定义的,FlowBean,包含了手机号,上行流量,下行流量.
然后我们再去重写map方法,在map方法中,我们这个LongWritable key,Text value
这个LongWritable就是获取的行号,也就是key,还有string类型的值,这个就是输入的value值,是一行的数据.
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
