指标收集
关注
分享
扫一扫
文章平均质量分 94
鸿乃江边鸟
Apache Spark Contributor
专注于技术的dotaer
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
SPARK中metrics是怎么传递的
在任务运行期间，利用heartbeat心跳来传递metrics在任务结束以后，利用任务结果的更新来传递metrics最终，都是通过sparkListener：SQLAppStatusListener和 AppStatusListener分别完成Spark UI状态的更新。原创 2022-12-12 23:19:40 · 1214 阅读 · 0 评论 -
Uber jvm profiler 使用
背景uber jvm profiler是用于在分布式监控收集jvm 相关指标，如:cpu/memory/io/gc信息等安装确保安装了maven和JDK>=8前提下，直接mvn clean packagejava application说明直接以java agent的部署就可以使用使用java -javaagent:jvm-profiler-1.0.0.jar=reporter=com.uber.profiling.reporters.KafkaOutputReporter,b原创 2020-10-10 14:17:17 · 363 阅读 · 0 评论