- 博客(15)
- 收藏
- 关注
RSS订阅原创 zookeeper填坑指南
最近新搭了环境，并且在用admin的管理员账号去搭建zk+kafka，由于非root权限，过程种出现了一些问题。记录如下:错误1Cannot open channel to 1 at election address /192.168.31.130:3888java.net.NoRouteToHostException: 没有到主机的路由 (Host unreachable)原因：防护墙没关，使用以下命令关闭systemctl stop firewalld.service错误2·java.
2020-10-16 15:29:25
645
原创 kylin-3.0.1 安装踩坑 基于hadoop3.1 + hbase2.0
下载https://mirror.bit.edu.cn/apache/kylin/apache-kylin-3.0.1/apache-kylin-3.0.1-bin-hadoop3.tar.gz上传至服务器并解压配置环境变量vim /etc/profile.d/kylin.shexport KYLIN_HOME=/usr/local/apache-kylin-3.0....
2020-05-07 19:44:27
1248
原创 phoenix-5.0.0 安装指南 基于hbase-2.2.4
基于 hbase-2.2.4下载http://phoenix.apache.org/download.html将 apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz 上传至服务器并解压tar -xvzf apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz进入【apache-phoenix-5.0.0-HBas...
2020-05-07 17:50:09
1656
5
原创 hbase报错 org.apache.hadoop.hbase.ClockOutOfSyncException:Reported time is too far out of sync with ma
有一个节点挂掉以后起不来，查看日志中报错信息如下：2020-05-07 17:15:05,262 INFO [regionserver/dockerapache-03:16020] regionserver.HRegionServer: STOPPED: Unhandled: org.apache.hadoop.hbase.ClockOutOfSyncException: Server doc...
2020-05-07 17:31:44
325
原创 Clickhouse rpm离线 集群安装
环境： centos7.5dockerapache-01dockerapache-02dockerapache-03由于服务器环境是离线的。需要采用离线安装。在线安装可以参考下列博客：https://blog.youkuaiyun.com/oppo62258801/article/details/1036018701.下载...
2020-05-07 11:32:52
1347
1
原创 快速排序笔记：原理及 java实现
1. 搬运一些概念稳定：如果a原本在b前面，而a=b，排序之后a仍然在b的前面。不稳定：如果a原本在b的前面，而a=b，排序之后 a 可能会出现在 b 的后面。时间复杂度：对排序数据的总的操作次数。反映当n变化时，操作次数呈现什么规律。空间复杂度：是指算法在计算机内执行时所需存储空间的度量，它也是数据规模n的函数。2.快速排序-快排快排的性能在所有排序算法里面是最好的，数据规模越...
2020-04-28 15:40:18
211
原创 Spark3.0.0 on yarn (基于hadoop3.2 ) 分布式安装 - 避坑指南
1 centos安装scala1.下载：https://downloads.lightbend.com/scala/2.11.12/scala-2.11.12.tgz2.解压至【/usr/local】 tar -xvzf scala-2.11.12.tgz3.配置环境变量vim /etc/profile#scalaexport SCALA_HOME=/usr/local/sca...
2020-04-26 17:37:04
1710
原创 hive3.1.2 分布式安装 (基于hadoo3.1.3+spark)
1.首先你需要先安装一个mysqlhttps://downloads.mysql.com/archives/community/hive需要采用MySQL数据库保存Hive元数据。因为Hive自带的derby存储元数据不能支持多个用户连接，实际上derby只能允许一个会话连接。2. 下载hive安装包https://mirror.bit.edu.cn/apache/hive/hive-3.......
2020-04-26 13:40:32
3105
3
原创 Mysql-8.0.18 安装教程
依赖的rpm下载libaio-0.3.109-13.el7.x86_64.rpmperl-Data-Dumper-2.145-3.el7.x86_64.rpmnumactl-2.0.9-7.el7.x86_64.rpmnumactl-devel-2.0.9-7.el7.x86_64.rpmnumactl-libs-2.0.9-7.el7.x86_64.rpmhttp://mirror....
2020-04-26 12:27:50
444
原创 Flink 1.10.0 分布式安装 scala2.11
10.28.3.11 dockerapache-01 #flink master10.28.3.12 dockerapache-0210.28.3.13 dockerapache-03下载安装包https://mirror.bit.edu.cn/apache/flink/flink-1.10.0/flink-1.10.0-bin-scala_2.11.tgz上传至服务器fl...
2020-04-24 15:48:42
991
原创 Hadoop 3.1.3分布式安装教程
10.0.0.11 dockerapache-01 #管理节点10.0.0.12 dockerapache-0210.0.0.13 dockerapache-031 集群机器配置hostnamevim /etc/hosts这里根据自己的情况配置，配置完成后，互相ping一下host名确认是不是配置成功ping DockerApache-022 java jdk配置下载好...
2020-04-24 10:12:39
1200
原创 Hbase安装报错：error: KeeperErrorCode = NoNode for /hbase/master；Master exiting；HMaster Aborted；
现象和问题：安装部署hbase2.2.4, master进程一起来就挂掉。hbase shell 中list命令报以下错误error: KeeperErrorCode = NoNode for /hbase/master查看master日志报错信息：2020-04-24 09:26:28,501 ERROR [master/dockerapache-02:16000:becomeAct...
2020-04-24 10:05:19
3291
原创 Hbase 2.1.4 分布式安装教程
首先的首先，hadoop安装zookeeper的安装hbase的安装https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/2.2.4/下载安装包，并上传到master节点上在master机器上进行以下操作：. 配置环境变量vim /etc/profile.d/hbase.shexport HBASE_HOME=/usr/local/hb...
2020-04-23 17:28:46
401
原创 Hbaseshell scan多种过滤操作
查询数据get ‘bjcjtest1_hdrive_2000’,"\x00\x80\x03\x8D\x96\xA9\xDCO\xB6"scan ‘tts_201905’,{STARTROW=>"\x00\x80\x0C\x9FD\xF1\x09|\x7F",STOPROW=>"\x00\x80\x0DJB\x03\xED\xAC\x0D\x00"}get多版本get ‘t1’,...
2020-04-16 15:00:54
1340
原创 cassandra数据迁移
cassandra集群之间表数据迁移1. copy to/copy from该方式适用于小数据量，当数据量一大这个过程会持续很久，并且文件也会很大2. sstableloader3. Snapshots4. token环遍历方式5. Sqoop6. ETL工具kettledataxReferences：https://blog.youkuaiyun.com/u012965373/arti...
2020-02-13 17:17:41
602
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人