
Hadoop
文章平均质量分 76
臭小优
这个作者很懒,什么都没留下…
展开
-
Hadoop笔记二之java操作hdfs对象
本例子是在java项目中使用java代码操作hdfs系统一个例子,包括了获取DFSClient对象,读取新建文件等操作原创 2016-07-14 00:01:12 · 603 阅读 · 0 评论 -
MapReuce笔记一之概念简介
hadoop中mapreduce任务简介原创 2016-09-20 23:10:10 · 1002 阅读 · 0 评论 -
MapReuce笔记六之输入类InputFormat
hadoop中mapreduce的输入类,自定义输入类CombineFileInputFormat,TextInputFormat等原创 2016-10-13 20:48:25 · 3774 阅读 · 0 评论 -
MapReuce笔记五之SequenceFile,MapFile
hadoop中通过SequenceFile,MapFile读写文件原创 2016-10-12 18:04:52 · 621 阅读 · 0 评论 -
Hadoop笔记六之Hdfs的基本shell操作
Hdfs基本的shell操作原创 2016-08-10 18:44:45 · 590 阅读 · 0 评论 -
MapReuce笔记四之hadoop类型和MR操作hdfs数据实例
hadoop类型和MR操作hdfs数据实例原创 2016-10-10 21:26:50 · 2281 阅读 · 0 评论 -
MapReuce笔记三之序列化
hadoop,mapreduce序列化代码实例原创 2016-10-10 21:16:29 · 354 阅读 · 0 评论 -
Hadoop笔记五之Hadoop伪分布安装
hadoop安装简介原创 2016-08-10 18:04:40 · 729 阅读 · 0 评论 -
Hadoop笔记四之Hdfs文件读写操作
本例是hdfs中关于文件的读写操作描述。原创 2016-07-19 22:04:58 · 771 阅读 · 0 评论 -
Hadoop笔记三之Hdfs体系架构及各节点之间的Rpc通信
前言: Rpc协议就是Server实现一个声明了很多方法的接口并对外暴露此接口,Client通过调用此接口中声明的方法向server发送信息从而实现了与server的通信。介绍:Hdfs是分布式部署的,分为nameNode,secondaryNameNode,dataNode,DFSClient四部分,每个节点之间都遵守RPC通信协议。 一:NameNode与DataNod原创 2016-07-17 01:11:55 · 4095 阅读 · 1 评论 -
Hadoop笔记一之Java中Rpc通信
Hadoop,java中通过使用Rpc协议实现不同jvm中对象的相互通信原创 2016-07-10 02:22:51 · 698 阅读 · 0 评论 -
MapReuce笔记二之MR任务在yarn容器中的资源管理
MR任务在yarn容器中的资源管理原创 2016-09-25 20:47:56 · 2377 阅读 · 0 评论