
大数据
文章平均质量分 83
夜晓码农
一个努力奔向后端的Android、嵌入式攻城狮
展开
-
利用K8S Statefulset搭建Etcd集群 - PVC存储
在测试过程中发现,直接使用本地存储,当节点机器损坏了,对应机器的etcd数据也丢失了,故而做了利用K8S PV,PVC以及NFS来存储数据的尝试,经过一番折腾,测试成功,博文记录,用以备忘。本地存储可以参考博文-原创 2024-03-24 14:52:28 · 718 阅读 · 0 评论 -
利用K8S Statefulset搭建Etcd集群 - 本地存储
公司因项目需要使用K8S部署ETCD集群供其他业务调用,网上搜索了解了下,一般K8S搭建ETCD集群大部分都是使用Etcd Operator来搭建。但是公司的项目运行在离线ARM架构平台,直接使用网上Etcd Operator代码,他们提供的镜像都是x86_64架构,经过Opeartor编译等尝试,最后都以失败告终。最后在Github上面找到一位大佬的开源代码,经过一通折腾,总算成功部署上了,故而博文记录,用于备忘。原创 2024-03-24 14:27:40 · 1351 阅读 · 0 评论 -
clickhouse 离线安装
软件环境操作系统CentOS 7软件版本clickhouse-client-20.9.2.20-2.noarch.rpmclickhouse-common-static-20.9.2.20-2.x86_64.rpmclickhouse-server-20.9.2.20-2.noarch.rpm安装步骤1.官方下载RPM包2.上传到服务器3.进入rpm包的目录,运行 rpm -ivh * 即可完成安装注意事项1.经过测试只需要安装上面三个RPM2.服务的管理通过clickhouse命原创 2020-09-29 14:42:51 · 3371 阅读 · 0 评论 -
搭建Zookeeper集群
ZooKeeper集群搭建环境说明1.服务器192.168.2.151192.168.2.152192.168.2.1532.系统版本CentOS 73.软件版本JDK 14.0.2 (文件名: jdk-14.0.2_linux-x64_bin.tar.gz)Zookeeper 3.6.1 (文件名: apache-zookeeper-3.6.1-bin.tar.gz)集群搭建依赖安装1.解压JDKtar -xvf jdk-14.0.2_linux-x64_bin.tar.gz原创 2020-09-27 13:34:04 · 207 阅读 · 0 评论 -
flink 批量写入Elasticsearch报 I/O reactor status: STOPPED
错误堆栈如下java.lang.IllegalStateException: Request cannot be executed; I/O reactor status: STOPPED at org.apache.http.util.Asserts.check(Asserts.java:46) at org.apache.http.impl.nio.client.CloseableHttpAsyncClientBase.ensureRunning(CloseableHt原创 2020-08-30 13:45:55 · 4667 阅读 · 0 评论 -
Apache Flink Standalone 集群搭建
背景因参与大数据项目调研需要使用Apache Flink进行数据处理并写入Elasticsearch数据库,故而整理该集群搭建文章避免遗忘。本次搭建使用三台物理服务器。服务器信息192.168.2.244(master、slave)192.168.2.245(slave)192.168.2.246(slave)192.168.2.244作为master节点,同时兼slave节点其他两台服务器作为slave节点操作系统Cent OS 7软件版本JDK 14.0.2Apache F原创 2020-08-15 12:58:10 · 936 阅读 · 0 评论