面试
关注
分享
扫一扫
lyz13469312003
这个作者很懒，什么都没留下…
展开
-
scala实用小点累积
主要是为了阅读spark源码方便，再次记录一些scala实用小点：1.scala的方法定义，[]表示可选def functionName ([参数列表]) : [return type] = { function body return [expr]}...原创 2020-02-11 08:46:26 · 178 阅读 · 1 评论 -
spark源码阅读----总则
一.内容 准备弄的spark模块有spark-core, spark-streaming, spark-sql，其他的暂不读。二.一些基本原则 阅读源码是为了更了解spark框架，进而能为生产上查找bug，集群及任务优化给到帮助。所以基本原则分来是，阅读分为两步： 1.先理出基本流程 2.细化基本流程到类和方法。 三.最终目的 ...原创 2020-02-07 16:03:16 · 132 阅读 · 0 评论