hadoop
文章平均质量分 87
The丶Tempest
带上你的千军万马 虽然最后不免孤军奋战
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
深入解析mapreduce中shuffle的工作原理
详细讲解mapreduce中shuffle的工作原理: 一,map端shuffle的工作流程 二,reduce端shuffle的工作流程 以及一些容易理解出错地方的总结原创 2017-08-08 19:59:54 · 9669 阅读 · 0 评论 -
你还在用错误的方法编写倒排索引吗?
看了好多博客大家都在用Map-Combine-Reduce模式编写倒排索引,其实这样编写并不完善,之所以这么说,是因为当输入文件大小大于一个block(数据块)大小时,就出现问题了,而解决问题的方法就在该文章中原创 2017-08-02 20:27:55 · 884 阅读 · 1 评论
分享