
MapReduce
嘉平11
这个作者很懒,什么都没留下…
展开
-
MR——实现二次排序
ps:一、字符串比较用compareTo()时:1,长度相同,从第一位开始比较,如果相同返回0,如果不同则马上返回这两个字符的ascii值的差值。2,长度不同,直接返回长度差值。二、Integer比较用compareTo()时:1,对比数字时相同,返回0。2,对比数字不同时,返回-1。实现每个人最喜欢的电影topN,按照uid、分数进行排序一、 RateBea...原创 2020-03-03 19:07:29 · 452 阅读 · 0 评论 -
MR笔记01——调度、打包运行
一、提交jar包到hadoop之后,怎么运行:hadoop jar /zgm2/wc.jar z1wc.MyRunner /data/wcount /out/zwcounthadoop jar可以换成yarn jar如果你设置yarn为mapreduce的默认资源调度平台,那么两个命令是一样的区别:hadoop jar 按mr1或yarn运行job,决定是否配置yarn。y...原创 2020-03-03 18:32:57 · 312 阅读 · 0 评论