Hadoop实战之温度排序

super_ozman

于 2015-08-17 15:23:52 发布

阅读量875

点赞数

CC 4.0 BY-SA版权

分类专栏： Hadoop in Action 文章标签： mapreduce hadoop

本文链接：https://blog.youkuaiyun.com/super_ozman/article/details/47725669

博客内容讲述了如何使用Hadoop MapReduce处理北京市2010年1月至5月的温度记录，通过按月份升序和温度降序排序，找出每月最热的五天，并将结果分别存储在单独的文件中。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

说明：输入文件为北京市2010年1月份到5月份每天每间隔3小时的温度记录，数据格式为yyyyMMddHHmm temp，如下截图

（图中温度为华氏温度）

需求：求出每个月份温度最高的5天

解决思路：1、以月份+温度为key进行排序，月份升序，温度降序

2、每个月份单独生成一个文件，读取每个文件前5条记录，即为每个月份温度最高的5天

程序如下

import java.io.DataInput;
import java.io.DataOutput;
import java.io.IOException;
import java.text.ParseException;
import java.text.SimpleDateFormat;
import java.util.Calendar;
import java.util.Date;

import org.apache.hadoop.conf.Conf

最低0.47元/天解锁文章

200万优质内容无限畅学