
mapreduce
吕秀才
静下心来,每一步都踏踏实实。
展开
-
mapreduce 只使用reduce 情况
今天有个功能不需要map,只需要reduce婍原创 2014-06-24 16:32:13 · 747 阅读 · 0 评论 -
mr中获取输入文件路径
import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapreduce.MRJobConfig;import org.apache.hadoop.mapreduce.Mapper;原创 2016-07-29 08:51:30 · 2211 阅读 · 0 评论 -
mapreduce 自定义类型
主要是重写write 与 readFields 两个方法。 最好要把toString也重写了,因为我当是没有重写,结果保存到hdfs上的是自定义对象的引用地址。这个还不确定到底是不是没有重写toString造成的。先记下吧。package com.wanda.explore;import com.wanda.util.ReflectUtil;import java.io.DataInput;i原创 2016-09-29 15:49:52 · 493 阅读 · 0 评论