自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(29)
  • 收藏
  • 关注

原创 Haproxy安装部署

准备 下载安装包 官方下载地址 如果速度慢可换成国内镜像 wget https://mirrors.huaweicloud.com/haproxy/2.1/src/haproxy-2.1.5.tar.gz 安装 1、解压 tar -xvf haproxy-2.1.5.tar.gz 2、编译 make TARGET=linux-glibc #如果自定义安装路径 make TARGET=linux-glibc PREFIX=/home/hadmin/haproxy 3、安装 make install #如

2020-07-09 18:04:28 803 2

原创 Flume + Rsyslog + Haproxy日志接入

介绍 Flume是一款分布式的ETL工具,以流式进行数据接入。它具有分布式、容错机制、可水平扩容的特性,并且使用简单,内置丰富的组件,通过配置文件即可实现数据的转移,不需要编写任何代码,特殊情况下需自行实现接口,编写自定义的组件。 架构 **Source:**数据源,数据通过Source接口进入Flume,内置多种Source,可直接与其他软件进行对接 **Channel:**管道,相当于缓存,Souce中的数据经过处理后会直接进入Channel中 **Sink:**输出,Sink接收Channel中的数据

2020-07-09 17:18:44 641

原创 Kafka监控之CMAK

介绍 CMAK就是Kafka Manager的前身,能够管理多个集群,最主要的是可以查看Consumer Offset,方便查看消费进度。 环境要求 1、Kafka 0.8+ 2、Java 11+。新版本都是用JDK11编译的,所以需要自行下载JDK11 3、CMAK3.0安装包:ZIP包下载地址 GitHub项目地址 说明:CMAK运行需要JDK11,在启动时候可以指定java-home,因此与系统JDK环境不会冲突 准备 我的部署环境: Kafka:2.2.0 Java:JDK8、JDK11

2020-07-09 14:54:37 5565

原创 Flink架构原理基础知识

Flink架构基础知识

2020-04-22 15:28:36 873

原创 Flink三种安装部署方式(HA)

Flink集群安装部署

2020-04-17 18:55:36 16423 3

原创 Kafka架构原理

kafka架构原理

2020-04-14 19:26:06 328

原创 Kafka集群安装部署

Kafka集群安装部署

2020-04-13 16:11:08 292

原创 RocketMQ集群安装部署(多主多从)

RocketMQ 2m-2s-async集群安装部署

2020-04-08 16:12:28 3454 1

原创 Spark Shuffle(基础)过程

Spark Shuffle

2020-04-07 16:04:25 356

转载 Spark宽依赖和窄依赖

Spark宽依赖和窄依赖

2020-03-26 16:48:45 188

原创 Spark架构和原理

Spark基础架构知识

2020-03-26 16:36:02 867

原创 Spark集群安装部署

Spark安装部署

2020-03-25 14:21:26 1439

原创 Storm架构运行原理

Storm架构和运行原理

2020-03-23 16:41:02 454

原创 Storm集群安装部署

Storm集群安装

2020-03-23 14:41:50 249

原创 Hive数据倾斜问题

Hive数据倾斜

2020-03-19 21:40:42 391

原创 Hive高级(自定义)函数

Hive高级函数

2020-03-19 20:07:19 553

原创 Hive分区(Partition)和桶(Bucket)

Hive分区和桶

2020-03-19 16:36:12 1582 1

原创 Hive安装部署

Hive安装部署

2020-03-17 19:51:04 231

原创 Hbase缓存读写优化

Hbase二级缓存

2020-03-17 17:42:12 1645

原创 Hbase数据热点和倾斜问题

Hbase数据倾斜热点问题

2020-03-16 16:31:04 843

原创 Hbase架构原理基础介绍

Hbase基础架构原理

2020-03-15 19:04:31 432

原创 Hbase分布式安装部署

Hbase分布式安装部署

2020-03-15 16:20:00 1654

原创 MapReduce的Shuffle过程

MapReduce的Shuffle过程原理 ...

2020-03-14 19:31:26 5545 1

原创 Hadoop架构和原理

Hadoop架构原理

2020-03-13 19:09:27 767

原创 Hadoop集群HA环境搭建

Hadoop集群HA搭建

2020-03-12 22:16:00 340

原创 HashMap四种遍历

HashMap遍历

2020-03-11 20:00:12 184

原创 二分查找

二分查找

2020-03-11 18:58:09 144

原创 归并排序

归并排序

2020-03-10 15:53:11 146

原创 快速排序

快速排序算法

2020-03-10 14:36:57 130

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除