- 博客(2)
- 收藏
- 关注
原创 doris随着运行时间,fe 运行内存增加速率过快,严重占用集群内存
前几天遇到了doris 集群内存资源不足,使用top命令,发现fe占用内存过大一直不释放资源问题,本身集群服务器配置就低,严重影响doris使用。使用show processlist命令 发现sleep会话过多,集群默认的sleep会话释放时间是8个小时。于是进行了fe重启。两天后发现fe运行内存已经增加了8g多,通过查询资料,但是只见增加,不见变小,问了做java开发的同事,同事说程序像貔貅,只进不出,不会释放,将释放时间设置为5分钟,再检测fe增加速率,发现两周只增加了1g。
2024-04-26 10:05:02
2084
6
原创 flume读取xml格式文件数据导入kafka中遇到的数据过大的问题
arger than the maximum request size you have configured with the max.request.size configuration.这样一个报错日志。当我修改完之后,发现还是报同样的错误,于是进行排查,最后在flume日志中发现参数还是默认的1M,最后在flume任务中加入了。sinks.k1.kafka.producer.max.request.size=9000000 才生效。
2024-04-26 09:15:33
260
3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人