大数据实战系列
关注
分享
扫一扫
文章平均质量分 96
大数据基础知识教程，包含Hadoop、spark、nosql、HDFS等
江湖一点雨
本来想把收费专栏限时转为免费，给大家一波回归福利，结果官方不支持。收费专栏限时最低价好了~
展开
-
Hadoop实战之MapReducer项目结构分析
一.MapReducer项目结构分析1.前言参考本例子前： 1.需要确保搭建好了hadoop集群环境。 2.安装了eclipse开发hadoop的环境。 3.这是关于MapReducer中的Mapper、Reduce、Job三个类的学习分析。2.hadoop的MapReducer模型结构（1）在eclipse中做hadoop开发： 在系统上打开eclipse，新建一个Map...原创 2018-05-06 17:59:22 · 2212 阅读 · 0 评论 -
Hadoop实战之mapreduce的WordCount统计单词数目
一.Hadoop实战之WordCount统计单词数目1.前言：上一篇文章MapReducer项目结构分析 分析了hadoop的计算模型MapReducer的项目结构，下面就仿照先做一个WordCount统计单词数目的实战，便于理解。参考本例子前： 1.需要确保搭建好了hadoop集群环境。 2.安装了eclipse开发hadoop的环境。 3.这是关于Hadoop实战之W...原创 2018-05-06 18:19:23 · 10986 阅读 · 9 评论 -
Hadoop实战系列之MapReduce 分析 Youtube视频数据
Hadoop实战系列之MapReduce 分析 Youtube视频数据一、实战介绍 MapReduce 是 Hadoop 的计算框架。 在运行一个 MR 程序时，任务过程被分为两个阶段：Map 阶段和 Reduce 阶段，每个阶段都是用键值对作为输入和输出。本文知识点： eclipse 的 Hadoop 开发环境搭建 编写 MR 程序 本地运行 生成 Jar 包提交 yarn ...原创 2018-07-03 17:10:00 · 5077 阅读 · 25 评论