- 博客(9)
- 收藏
- 关注
RSS订阅原创 分布式理论篇：zab协议
1. ZAB 协议全称：Zookeeper Atomic Broadcast（Zookeeper 原子广播协议）上图显示了 Zookeeper 如何处理集群中的数据。所有客户端写入数据都是写入到 主进程（称为 Leader）中，然后，由 Leader 复制到备份进程（称为 Follower）中。从而保证数据一致性。复制过程类似 2PC，但ZAB 只需要 Follower 有一半以上返回 Ack 信息就可以执行提交，大大减小了同步阻塞。也提高了可用性。还有一些细节： Leader 在收到
2022-02-09 14:23:39
844
原创 docker安装cdh
1. 启动命令docker run --name cdh --hostname=quickstart.cloudera --privileged=true -t -i -p 8020:8020 -p 8022:8022 -p 8888:8888 -p 10000:10000 -p 7180:7180 -p 21050:21050 -p 50070:50070 -p 50075:50075 -p 50010:50010 -p 50020:50020 -p 8890:8890 -p 60010:60010
2022-01-28 11:24:55
882
原创 bug-hadoop:Could not locate executable null\bin\winutils.exe in the Hadoop binaries
原因：缺少winutils.exe程序Hadoop都是运行在Linux系统下的，在windows下eclipse中运行mapreduce程序，要首先安装Windows下运行的支持插件下载：https://gitee.com/gordon02/hadoop-winutils?_from=gitee_search使用：System.setProperty("hadoop.home.dir", "D:\\soft\\hadoop-2.7.4")...
2022-01-18 14:11:49
1736
原创 oracle导入csv文件
1.编辑控制脚本copy.ctloptions(skip=1,BINDSIZE=20971520, ROWS=10000, READSIZE=20971520, ERRORS=999999999)load dataCHARACTERSET utf8infile '/home/oracle/part-00000-04cf2530-87cb-4f9f-a094-5047baa3366c.csv'append into table "CK_CREDIT_LOAD_NEW_COPY1"fields t
2022-01-18 10:19:48
3335
原创 基于docker安装elastalert2进行日志监控报警
1. 启动容器docker run -itd --restart=always --name elastalert2 \ -v /opt/elk/elastalert2/data:/opt/elastalert/data \ -v /opt/elk/elastalert2/config.yaml:/opt/elastalert/config.yaml \ -v /opt/elk/elastalert2/rules:/opt/elastalert/rules \ -v ...
2021-12-10 14:59:05
3992
7
原创 centos7上单节点elk7.10日志收集系统搭建
1. 准备工作安装jdk8以上版本2. 安装elesticsearch7.102.1 修改系统参数vi /etc/security/limits.conf末尾添加如下参数：* soft nofile 65536* hard nofile 131072* soft nproc 4096* hard nproc 40962.2 修改系统参数 vi /etc/sysctl.confvm.max_map_count=2621442.3配置重新生效sysctl -p...
2021-11-05 15:30:57
1301
原创 Spring Cloud Alibaba 学习（三）：nacos的配置中心config功能
首先搭建springcloud alibaba 环境搭建1. 新建config模块，引入相关依赖 <!-- 业务服务所需依赖 --> <dependencies> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web&l
2021-07-10 20:52:02
255
原创 Spring Cloud Alibaba 学习（二）：nacos服务注册和发现
1. 下载启动nacos下载地址：https://github.com/alibaba/nacos/releases启动命令：startup.cmd -m standalone用户名密码：nacos/nacos2. 服务注册2.1 在user模块新建启动类并注册一个controller用于测试import org.springframework.boot.SpringApplication;import org.springframework.boot.autoconfigur.
2021-07-10 18:21:00
194
原创 Spring Cloud Alibaba 学习（一）：项目环境搭建
1. 使用idea创建一个父子工程2.版本选择官方关于版本的关系说明：https://github.com/alibaba/spring-cloud-alibaba/wiki/%E7%89%88%E6%9C%AC%E8%AF%B4%E6%98%8ESpring Cloud Version Spring Cloud Alibaba Version Spring Boot Version Spring Cloud 2020.0.0 2021.1
2021-07-10 18:04:18
271
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人