HADOOP COMMON与HDFS架构与实现原理
文章平均质量分 94
日常学习笔记
123小灰灰123
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
序列化和压缩
hadoop需要处理P、T级别的数据,所以在org.apache.hadoop.io中包含一些面向海量数据处理的基本工具。1、序列化对象的序列化(Serialization)用于将对象编码成一个字节流,以及从字节流中重新构建一个对象。相反的,处理过程称为反序列化(Deserializing)序列化有三种主要的用途:作为一种持久化格式,一个对象被序列化后,他的编码可以被存储在磁盘上,供以后反序列化使用作为一种通信数据格式:序列化结果可以从一个虚拟机通过网络传到另一个虚拟机上作为一种拷贝,克隆原创 2021-09-14 22:23:34 · 856 阅读 · 0 评论 -
Hadoop配置信息处理(源码解析)
一、配置文件简介 配置文件是一个系统灵活不可缺少的一部分1.1windows配置文件1windows系统广泛使用一种特殊化ASCII文件(以“ini”为文件扩展命)作为它的主要配置文件标准。以下为INI文件片段。应用程序可以拥有自己的配置文件,来存储应用的设置信息。INI文件将配置信息分为一部分一部分“节”,上图[info]就是节标题。每一节就是对各个项进行赋值。ro1. 2 Java配置文件JDK提供了java.util.Properties类,他继承于Hashtable,原创 2021-09-05 20:53:09 · 368 阅读 · 0 评论
分享