Big Data--1, 初识hadoop

Apache开源的Hadoop用于可靠、可扩展的分布式计算,包括数据分片、冗余分配、水平扩展和MapReduce计算。相关项目如Hbase、Hive、Pig等提供数据管理和处理能力。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1,  什么是hadoop?

Apache 开源的软件,主要用于可靠,可扩展的分布式计算。

可靠              --  数据分片后被冗余的分配到多个节点,一个节点出现问题,不会影响到整个程序的执行。

可扩展          -- 很好的水平扩展能力。

分布式计算  -- 这是通过mapReduce获得的,map把数据映射到集群中的服务器,reduce用于合并结果。


2, 很多相关的项目,其中重要的包括:

Hbase   -- 一个可扩展的,分布式的,列数据库。

Hive      -- 一个数据仓库。

Pig       -- 一个高层数据流语言和平行计算的框架

还有很多其它项目,请参考官网: http://hadoop.apache.org/.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值