BigData环境安装采坑记录
文章平均质量分 71
Hadoop,HBASE,ZooKeeper,Hive等大数据开发环境安装教程
天上的西红柿
如果人只能活一次,就让梦想比现实高那么一点吧。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Apache Storm-2.1.0轻量型服务器伪分布式安装教程
Apache Storm-2.1.0轻量型服务器伪分布式安装教程开发环境:1. 阿里云轻量型服务器2. ubuntu18.04系统3. 已安装Java1.84. 已安装zookeeper3.4.x首先,从Apache官网下载安装包,这里不再赘述。解压并重命名文件夹为storm-2.1.0,修改文件所有者$ sudo tar -zxvf apache-storm-2.1.0.tar.gz -C /usr/$ sudo mv apache-storm-2.1.0/ storm-2.1.0原创 2020-09-19 11:47:58 · 349 阅读 · 0 评论 -
HashMap的容量(桶的数量)为什么要是2的n次方
HashMap的容量(桶的数量)为什么要是2的n次方HashMap为了存取高效,要尽量较少碰撞,就是要尽量把数据分配均匀,每个链表长度大致相同。关键就在于把当前数据存放到哪一个桶中,这个算法就是取模运算。假设:length:HashMap的容量hash:当前key的哈希值取模运算为 hash % length但是,在计算机中,直接取模运算的效率不如位运算(&),什么是位运算?就是对于二进制数据的按位运算,1和1才得1,其他都得0,比如:1011 & 1100 = 1000转载 2020-07-04 09:44:26 · 1057 阅读 · 1 评论 -
最详细JMX远程连接服务器Zookeeper失败问题踩坑和总结
史上最全JMX远程连接服务器Zookeeper失败问题踩坑和总结环境:Ubuntu18.04服务器 Zookeeper3.4.6版本 伪分布式这里不从零介绍JMX配置的基本教程了,那些随便搜一下都有,主要介绍一下博主在使用服务器配置JMX时遇到的坑。想要远程查看和监控Zookeeper运行情况,JMX是一种不错的选择。显示如下:若想通过 jmx监控Zookeeper运行情况,需在启动参数(zkServer.sh)增加jmx配置。网上大体都是如下:-Dcom.sun.management.jmx原创 2020-06-06 20:40:26 · 2642 阅读 · 3 评论 -
记一次zookeeper启动异常:Snapshot directory has log files. Check if dataLogDir and dataDir configuration is
记一次zookeeper启动异常:org.apache.zookeeper.server.persistence.FileTxnSnapLog$SnapDirContentCheckException:Snapshot directory has log files. Check if dataLogDir and dataDir configuration is correct.今天启动zookeeper时:本以为一切正常,然鹅…当我查看jps时发现,空空如也:啥也别说了,查看日志[vera原创 2020-05-25 10:47:51 · 2740 阅读 · 0 评论 -
ubuntu(伪分布式)修改HBASE1.2.x使用外部zookeeper详细教程(服务器亦适用)
ubuntu(伪分布式)修改HBASE1.2.x使用外部zookeeper详细教程(服务器亦适用)此篇博文接上一篇zookeeper3.4.x安装教程:https://blog.youkuaiyun.com/qq_44880708/article/details/104747756以HBASE1.2.4为例,很久以前我安装配置了HBASE1.2.4(戳这里查看详情)很久以后的今天,zookeeper学会...原创 2020-03-09 13:10:27 · 357 阅读 · 1 评论 -
ubuntu(伪分布式)安装zookeeper-3.4.x详细教程(服务器亦适用)
ubuntu(伪分布式)安装zookeeper-3.4.x详细教程(服务器亦适用)系统环境:(阿里云服务器)ubuntu18.04首先下载zookeeper镜像,以zookeeper-3.4.14为例$ wget http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.14/zookeeper-3.4.14.tar.gz解压:$ ...原创 2020-03-09 12:25:41 · 522 阅读 · 0 评论 -
阿里云轻量型服务器在 Hadoop2.7.x 伪分布式环境下安装配置 HBASE1.2.x
阿里云轻量级服务器在Hadoop2.7.3环境下配置HBASE1.2.4HBASE简介HBASE下载与解压修改HBASE配置文件配置环境变量小结HBASE简介HBASE下载与解压下载地址:https://archive.apache.org/dist/hbase/1.2.4/hbase-1.2.4-bin.tar.gzHBASE各版本地址:https://archive.apache.or...原创 2019-11-06 21:05:07 · 417 阅读 · 1 评论 -
阿里云轻量级服务器ubuntu18.04配置Java1.8伪分布式安装Hadoop2.7.x
阿里云轻量型服务器ubuntu18.0.4配置Java1.8伪分布式安装Hadoop2.7.3前言第一部分:更改主机名和添加新用户第二部分:Java1.8的下载和安装功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaT...原创 2019-11-05 21:35:24 · 929 阅读 · 0 评论
分享