
大数据
分享学习经验,共同成长
钱叁壹
拼搏到无能为力,努力到感动自己!
展开
-
hadoop入门:MapReducer实现自己的wordcount程序
一、MapReduce概述 1、MapReduce定义 MapReduce是一个分布式运算程序的编程框架,是用户开发“基于Hadoop的数据分析应用”的核心框架。 MapReduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个Hadoop集群上。 2、MapReduce原创 2021-12-14 23:52:20 · 367 阅读 · 0 评论 -
Hadoop入门:HDFS的API操作
一、运行前提 已经搭建好全分布式hadoop集群 二、hdfs实例代码 package com.psn.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.*; import org.checkerframework.dataflow.qual.TerminatesExecution; import org.junit.After; import org.junit.Before; import原创 2021-12-14 21:15:44 · 1473 阅读 · 0 评论