- 博客(4)
- 收藏
- 关注
原创 Hadoop的优化发展
Hadoop 1.0两大核心组件MapReduce和HDFS,均在不断发展中遇到了自身的局限性和不足,因此都有2.0进行优化发展。 HDFS HA ,HDFS federation
2021-11-17 18:30:10
1001
原创 大数据基础之Hbase
一、为什么需要Hbase Hbase是BigTable的开源实现,是基于列的分布式数据库,具备高可靠、高性能、可伸缩等技术优势,主要用来存储非结构化和半结构化的松散数据。 Hadoop为什么要设计这么一个Hbase分布式数据库呢? 虽然Hadoop已经有了MapReduce和HDFS,但是Hadoop主要还是为了解决大规模数据离线批处理,因此Hadoop是没有办法满足大数据实时处理的需求。随着这些年数据的大规模爆炸式增长,传统关系型数据库的扩展能力有限,受到了非常大的挑战。 二、数据坐标概念 传统
2021-07-19 20:03:17
1308
原创 大数据学习笔记(连载)—Hadoop基础
一、大数据发展历程 当大数据概念铺天盖地传入大家视野范围内,基本是在2010年前后,要讲大数据必定脱离不了第三次信息化浪潮。人类前后经历了三次信息化浪潮,分别是: 第一次信息化浪潮,1980年前后,标志是个人计算机出现与普及,代表企业是Intel、微软、苹果、IBM等; 第二次信息化浪潮,1995年前后,标志是互联网的迅速普及,代表企业是雅虎、谷歌等; 第三次信息化浪潮,2010年前后,标志是云计算、大数据、物联网的发展与应用,涌现了一...
2021-07-03 15:02:50
448
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人