
Task
zerone-f
这个作者很懒,什么都没留下…
展开
-
第37课:Task执行内幕与结果处理解密
Task执行原理流程图 1.当Driver中的CoarseGrainedSchedulerBackend给CoarseGrainedExecutorBackend发送LaunchTask之后,CoarseGrainedExecutorBackend在收到LaunchTask消息后,首先会反序列化TaskDescription: val taskDesc = ser.dese...原创 2018-10-04 22:25:06 · 274 阅读 · 0 评论 -
36.Spark大型电商项目-用户访问session分析-session聚合统计之使用Scala实现自定义Accumulator
目录 代码 SessionAggrStatAccumulatorTest.scala 运行结果 本篇文章将介绍用户访问session分析-session聚合统计之使用Scala实现自定义Accumulator。 代码 SessionAggrStatAccumulatorTest.scala package main.xxx.scala.spark import main....原创 2019-03-05 16:45:46 · 495 阅读 · 0 评论