- 博客(9)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 记录Flink On Yarn taskmanager分配不均匀问题
业务场景：Flink On Yarn任务启动组件版本：CDH：6.3.0Flink：1.12.1Hadoop：3.0.0问题描述：在使用FLink on Yarn调度过程中，发现taskmanager总是分配在集中的几个节点上，集群有11个节点，但每个任务启动，只用到两三个节点，导致这几台服务器负载过高，其他节点又比较空闲。问题分析：先介绍yarn的两个参数：1、yarn.scheduler.fair.assignmultiple2、yarn.scheduler.fair.max.
2022-04-19 15:53:59
3307
2
原创 记录Elasticsearch 分片恢复问题
问题描述：ES在重启只有健康状态变为黄色，有几个分片未分配成功查看原因：是因为集群恢复导致的常见的几种未分配原因如下：ALLOCATION_FAILED：由于分片分配失败而未分配。CLUSTER_RECOVERED：由于集群恢复而未分配。DANGLING_INDEX_IMPORTED：由于导入了悬空索引导致未分配。EXISTING_INDEX_RESTORED：由于恢复为已关闭的索引导致未分配。INDEX_CREATED：由于API创建索引而未分配。INDEX_REOPENED：由于打
2022-04-14 16:27:53
3647
原创 记录Elasticsearch circuit_breaking_exception异常解决
记录Elasticsearch circuit_breaking_exception异常解决
2022-04-13 17:53:21
2983
原创 使用Jmeter实现对Elasticsearch的查询性能测试
一、安装与使用1、Jmeter下载地址：https://jmeter.apache.org/download_jmeter.cgi2、安装下载后解压，并配置Jmeter环境变量，且依赖jdk3、启动进入bin目录，找到jmeter.bat，启动4、常用配置（1）汉化：Options->Choose Language（2）查看运行日志：选项->日志查看，并可设置日志级别二、ES查询性能测试1、新建线程组属性介绍：（1）线程数：模拟用户数量（2）Ramp-up 时间
2022-04-08 11:29:02
3462
1
原创 Elasticsearch-header、Kibana实现对ES的可视化
Elasticsearch-header、Kibana实现对ES的可视化
2022-04-02 11:41:46
2267
原创 Flink1.9.0升级到Flink1.12.1问题汇总
业务场景：Flink消费Kafka数据写入Hbase组件版本：CDH：6.3.0Flink：1.12.1Hbase:2.1.0-cdh6.3.0问题1：java.lang.NoSuchMethodError:org.apache.commons.cli.Option.builder(Ljava/lang/string;)问题原因：hadoop-common依赖中commons-cli版本过低，导致程序运行找不到最新版的方法解决办法：剔除Hadoop中commons-cli的依赖，并添
2022-03-25 11:28:22
2515
原创 CDH集成ES MasterNotDiscoveredException问题解决
CDH集成ES MasterNotDiscoveredException问题解决
2022-03-17 18:29:57
2847
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人