
大数据
Empyan
放弃不是我的风格 垂死挣扎才是我的宿命
展开
-
Hadoop入门·从零搭建hadoop集群
首先先介绍下集群。就是现在是大数据时代嘛。生活中每天无时无刻都在产生着海量数据,这些数据都是很有价值的,比如分析用户数据可以掌握用户喜好,进行针对推荐之类,医学上分析病人数据可以训练机器人学会看病。那么庞大的数据量用一台机子去计算,无论你的配置有多好,都跟不上撑不住。所以一个任务要有多台机子一起完成,一个任务由多台机子进行计算。这些机子就组成一个集群。而Hadoop中的HDFS模块,也就...原创 2019-02-10 00:02:39 · 2731 阅读 · 0 评论 -
HBase原理
讨论QQ:1586558083目录系统架构物理存储整体的物理结构StoreFile 和 HFile 结构MemStore 和 StoreFileHbase WAL HLog预写Region 寻址机制老的 Region 寻址方式新的 Region 寻址方式 读写过程 读请求过程 写请求过程RegionServer 工作机制Region 分配RegionServ...转载 2019-07-20 17:58:53 · 141 阅读 · 0 评论 -
一起走进动物园管理员——ZooKeeper
作者:汤小洋来源:http://blog.51cto.com/12402007/2331203一、ZooKeeper简介1. ZooKeeper是什么 Apache ZooKeeper是一个开源的分布式服务框架,为分布式应用提供协调服务,用来解决分布式应用中的数据管理问题,如:配置管理、域名服务、分布式同步、集群管理等官网 https://zookeeper.apache.o...转载 2019-07-22 13:32:55 · 544 阅读 · 0 评论 -
5分钟入门Zookeeper集群配置
安装包解压,复制配置文件# The number of milliseconds of each ticktickTime=2000# The number of ticks that the initial# synchronization phase can takeinitLimit=10# The number of ticks that can pass betwe...原创 2019-07-22 13:56:28 · 166 阅读 · 0 评论