
大数据
随便写写
kp6i9HIY4G7WPzH
技术的价值在于,我会,别人不会!
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
五、MapReduce练习----学生成绩按照总成绩降序排列,总成绩相同依次按照语文成绩、数学成绩
学生成绩参考:https://pan.baidu.com/s/1h8IhPwLaAv39N7yOH-Gv8g二次排序:依次按照多个条件进行排序MapReduce 的所有排序都是针对 key 进行的,通常 key 只包含一列数据,如果想让 key 包含多列数据,通常会自定义 key 实现学生信息按照语文成绩降序排列,如果语文成绩相同,按照数学成绩降序排列 自定义 key 类型包含语...原创 2019-12-21 14:46:52 · 3842 阅读 · 0 评论 -
四、MapReduce练习----统计学生成绩前三名
结果展示:zhouba 92zhangsan 83wangwu 75要统计的学生成绩参考:https://pan.baidu.com/s/19R_-HOt5kmbNCuUsarYaSQpackage com.it666.student;import java.io.IOException;import java.util.ArrayList;import java.util.Li...原创 2019-12-21 14:40:16 · 1351 阅读 · 0 评论 -
三、MapReduce练习----学生成绩降序排列
结果展示:zhouba 92zhangsan 83wangwu 75lisi 71zhengshi 69wujiu 64yanqi 58zhaoliu 55要排序的学生成绩文档:https://pan.baidu.com/s/1cOS_rqAmMg0ioo2dKXFHwQ代码:package com.it666.student;import java.io.IOExcep...原创 2019-12-21 14:33:28 · 2816 阅读 · 7 评论 -
二、MapReduce练习----自定义分区:把学生成绩分成 2 份,一份是及格的,一份是不及格的
学生成绩分区:及格 不及格MapReduce 执行过程中的一些特殊操作:partition(分区):决定改组 key-value 交由哪个 reduce 进行汇总sort(排序):数据按照 key 进行升序排列grouping(聚合):把 key 相同 value 聚集到一个集合中,形成新的 key-value 输入 reduce 进行汇总如果想实现复杂的数据分析,那么必须手动控制这些...原创 2019-12-21 14:24:15 · 516 阅读 · 0 评论 -
一、MapReduce练习 IpAction,统计ip 和 操作
统计每个 ip 做了多少次 操作## 1. 统计每个 ip 做了多少次 操作统计每个 操作,执行了多少次每个 ip 的每个操作 执行了多少次192.168.10.109 这个 ip 执行了多少次操作每个 ip 的每个操作 执行了多少次,只看次数大于 350 的代码:统计每个 ip 做了多少次 操作## 1. 统计每个 ip 做了多少次 操作package com.it666.ip...原创 2019-12-16 16:51:52 · 404 阅读 · 2 评论