大数据
关注
分享
扫一扫
chenliuzuo
这个作者很懒，什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
hadoop
https://zhuanlan.zhihu.com/p/19962491?columnSlug=donglaoshi转载 2016-12-13 10:20:22 · 261 阅读 · 0 评论 -
MapReduce相关一
基本特点 易于编程、良好扩展性、高容错性、适合PB级别以上海量数据的离线处理 不擅长的领域： 实时计算：毫秒或秒级返回结果 流式计算：输入数据是静态的，不能动态变化 DAG计算：多个应用程序存在依赖关系，后一个应用程序的输入为前一个的输出 编程模型 一、将作业分为map和reduce两个阶段 二、map由一系列maptask组成 输入数据格式解析：InputFormat转载 2016-12-16 11:06:10 · 674 阅读 · 0 评论