大数据学习03：MapReduce及Bigtable简单介绍

最新推荐文章于 2022-02-08 00:20:40 发布

weixin_44804248

最新推荐文章于 2022-02-08 00:20:40 发布

阅读量677

点赞数

CC 4.0 BY-SA版权

分类专栏：大数据学习文章标签：大数据学习

本文链接：https://blog.youkuaiyun.com/weixin_44804248/article/details/88733991

大数据学习专栏收录该内容

19 篇文章

订阅专栏

博客主要对MapReduce和Bigtable进行简单介绍，还提到Bigtable作为大表与NoSQL数据库HBase的关联，涉及大数据领域相关技术。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

MapReduce及Bigtable简单介绍

MapReduce的编程模型：先拆分、再合并
HDFS = NameNode+SecondaryNameNode+DataNode

求和：大任务=小任务1+小任务2+......完事再合并

MR编程模型

BigTable：大表------NoSQL数据库：HBase

1、关系型数据库：Oracle、MySql等等----->行式数据库----->insert update delete
2、常见的NoSql数据库
    （*）Redis：内存数据库
    （*）HBase：面向列------->列式数据库-------->select
    （*）MongoDB：面向文档（Bson文档：是JSON的二进制）
3、大表的基本思想：将所有的数据存入一张表（违背了范式的要求，通过牺牲空间，换取时间）
HBse =Zoookeeper+HMaster(主节点)+RegionServer（从节点）

关系型数据库与非关系型数据库表结构对比