
Hadoop
文章平均质量分 95
乘物游心0823
这个作者很懒,什么都没留下…
展开
-
HDFS总结
一、简介 1.什么是HDFS? 利用网络将文件存储在多个主机上 2.特点 1)流数据读写:HDFS目标是处理批量数据,为了提高数据吞吐量,采用流数据的读取方式; 2)简单一致的文件模型:一次写入、多次读取的简单模型,文件一次写入,之后只能读取; 3)超大规模数据集:可以存储PB级别的数据; 4)高可用性:可以自动检测硬件故障,并自动恢复; 3.基本概念 1)数据块 默认块的大小...原创 2016-12-06 21:38:26 · 3688 阅读 · 0 评论 -
MapReduce原理
split详解: https://blog.youkuaiyun.com/dr_guo/article/details/51150278原创 2019-02-24 19:16:16 · 165 阅读 · 0 评论