- 博客(2)
- 资源 (1)
- 收藏
- 关注
原创 mapreduce 实现单表关联
输入: child parent tom jack tom lucy jone jack jone lucy jack ben jack alice lucy fred lucy jin 输出: grandchild grandparent tom ben tom alice tom fred tom jin jone ben jone alice jo
2016-10-20 17:22:11
426
原创 MapReduce执行流程
一 Map端(针对一个map task进行说明) 1 输入(inputspilt) (1)计算并生成inputspilt,其大小可以设置,默认inputspilt的大小是一个block的大小; (2)最好将inputspilt的大小设置和block大小相同,这样可以避免一个inputspilt跨多个block,如果多个block分布在不同的datanode上,这样需要到多个data
2014-07-05 21:53:15
404
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人