yy1506438689的博客

一、常用组件Zookeeper 1.Zookeeper是什么 Zookeeper是一个开源的分 布式应用程序协调服务 Zookeeper是用来保证数据在集群间的事务一致性 Zookeeper应用场景 集群分布式锁 集群统一命名服务 分布式协调服务 2.Zookeeper角色与特性 - Leader :接受所有Follower的提案请求并统一协调发起提案的投票,负责与所有的Follower进行内部数据交换 ...

一、完全分布式 主机名 IP地址 软件 角色 nn60 192.168.4.60/24 HDFS，YARN NameNode SecondaryNameNode ResourceManager node61 192.168.4.61/24 HDFS，YARN DataNode NodeManager node62 192.168.4.62/24 HDFS，YARN Da...

一、大数据 1.大数据的由来 随着计算机技术的发展，互联网的普及，信息的积累已经到了一个非常庞大的地步，信息的增长也在不断的加快，随着互联网，物联网建设的加快，信息更是爆炸式增长，收集，检索，统计这些信息越发困难，必须使用新的技术来解决这些问题 2.大数据的定义 大数据指无法在一定时间范围内用常规软件工具进行捕捉，管理和处理的数据集合，需要新处理模式才能具有更强的决策力，洞察发现力和优化能力的海量，高增长率和多样化的信息资产 是指从各种各样类型的数据中，快速获得有价值的信息 3...