qq_34955491的博客

发文章一、HBase介绍1.1 HBase 的起源1.2 HBase 的角色1.2.1 HMaster1.2.2 RegionServer1.3 HBase 的架构二、HBase的部署和使用2.1 部署2.22.32.42.52.62.72.82.92.102.11三、HBase的优化四、HBase的项目五、总结一、HBase介绍1.1 HBase 的起源HBase 的原型是 Google ...

d一、Flume简介二、Flume 角色2.1 Source2.2 Channel2.3 Sink2.4 Event三、Flume 传输过程四、Flume 部署及使用五、Flume 监控之 Ganglia六、练习一、Flume简介1）Flume 提供一个分布式的，可靠的，对大数据量的日志进行高效收集、聚集、移动的服务，Flume 只能在 Unix 环境下运行。2）Flume 基于流式架...

d一、Sqoop简介二、Sqoop原理三、Sqoop安装3.1 下载并解压1）[最新版下载地址](http://mirrors.hust.edu.cn/apache/sqoop/)2）上传安装包sqoop-1.4.7.bin_hadoop-2.6.0.tar.gz到虚拟机中，如我的上传目录是：3）解压sqoop安装包到指定目录，如：3.2 修改配置文件1)重命名配置文件2)修改配置文件3.3 拷贝...

一、需求描述------ 统计Youtube视频网站的常规指标，各种TopN指标：------ 统计视频观看数Top10------ 统计视频类别热度Top10------ 统计视频观看数Top20所属类别包含这Top20视频的个数------ 统计视频观看数Top50所关联视频的所属类别Rank------ 统计每个类别中的视频热度Top10------ 统计每个类别中的视频...

Hadoop是什么？Hadoop是分布式系统基础架构主要解决海量数据的存储与计算单纯来讲Hadoop没多大作用，一般指的都是Hadoop生态圈Hadoop组成hdfs 存储mapreduce 计算yarn 资源调度common 公共模块hdfs架构概述1）NameNode（nn）：存储文件的元数据，如文件名，文件目录结构，文件属性(生成时间，副本数，文件权限)，以及每个...

一、概述1.概述Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目。ZooKeeper最为主要的使用场景，是作为分布式系统的分布式协同服务2.特点1）Zookeeper:一个领导者(leader)，多个跟随者(follower)组成的集群。2）Leader负责进行投票的发起和决议，更新系统状态3）Follower用户接收客户请求并向客户端返回结果，...

一、Hive基本概念1、什么是Hive2、Hive的优缺点3、Hive架构原理4、Hive和数据库比较二、Hive安装环境准备1、Hive安装地址2、Hive安装部署3、将本地文件导入Hive案例4、mysql安装5、Hive元数据配置到mysql6、Hive常用交互命令7、Hive其他命令操作8、Hive常见属性配置三、Hive数据类型1、基本数据类型2、集合数据...

ddd

zookeeper集群搭建

kvm-以桥接的方式搭建网络，使得客户机、宿主机、网关处于同一个网络环境。可以参看下这篇文章KVM——以桥接的方式搭建虚拟机网络配置

ubantu配置网桥的可以参考下这篇文章https://blog.youkuaiyun.com/swimming_in_it_/article/details/53142997

CentOS服务器版本一开始使用会碰到的几个问题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出...

Hadoop的安装与配置Hadoop安装新的改变Hadoop安装和jdk安装一样，下载、解压、配置环境变量、验证是否安装成功 python@python-bao:~$ tar -zxvf hadoop-2.7.3为了后面更简单的操作过程，我们把解压名改成hadoop python@python-bao:~$ mv hadoop-2.7.3 hadoop python@python...