hadoop
简单cy
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
MapReduce执行流程
一 Map端(针对一个map task进行说明) 1 输入(inputspilt) (1)计算并生成inputspilt,其大小可以设置,默认inputspilt的大小是一个block的大小; (2)最好将inputspilt的大小设置和block大小相同,这样可以避免一个inputspilt跨多个block,如果多个block分布在不同的datanode上,这样需要到多个data原创 2014-07-05 21:53:15 · 441 阅读 · 0 评论 -
mapreduce 实现单表关联
输入: child parent tom jack tom lucy jone jack jone lucy jack ben jack alice lucy fred lucy jin 输出: grandchild grandparent tom ben tom alice tom fred tom jin jone ben jone alice jo原创 2016-10-20 17:22:11 · 453 阅读 · 0 评论
分享