
MapReduce
百世修行
aaa
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
MapReduce模板
模板01 MrModel package com.bipt.model.MrModel.mymode; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.conf.Configured; import org.apache.hadoop.fs.P...原创 2018-12-27 23:03:54 · 359 阅读 · 0 评论 -
MapReduce计算气温原始数据
/** 1.根据天气的原始数据,通过截取的方式,找出需要的天气 2.截取指定字符串的天气 */ 数据下载 package com.bipt.model.wether; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.conf.Configure...原创 2018-12-28 14:53:52 · 965 阅读 · 0 评论 -
MapReduce处理两个文件合并重新显示
文件01 1 Beijing 2 Guangzhou 3 Shenzhen 4 xi’an 文件02 factoryname addressId BeiJing Red Star 1 ShenZhen Thunder 3 Guangzhou Honda 2 Beijing Rising 1 Guangzhou Development Bank 2 Tencent 3 Bank of ...原创 2018-12-28 16:15:37 · 4210 阅读 · 2 评论 -
MapReduce二次排序
源码下载 源码下载 源数据,排序之前 3 12 1 23 2 34 32 2 12 12 32 3 1 5 23 9 23 3 1 2 2 44 3 12 4 22 排序之后 需要的效果; 这里两列都是 升序排列 IntPair [first=1, second=2] IntPair [first=1, second=5] IntPair [first=1, second=23]...原创 2018-12-28 19:52:39 · 338 阅读 · 0 评论 -
自定义实现MapReduce中的wordcount功能导出jar使用
创建Maven项目 选择默认路径 maven 下一步 设置项目名称和包 修改pom文件 修改后内容如下 pom.xml 文件 <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schem...原创 2018-12-24 23:58:27 · 582 阅读 · 0 评论