
spark基础
wang987158
这个作者很懒,什么都没留下…
展开
-
spark性能优化点(1)
1. 分配更多的资源 1.1 分配哪些资源 1.2 在哪里可以设置这些资源 1.3 参数调节到多大,算是最大 分配更多的资源: 它是性能优化调优的王道,就是增加和分配更多的资源,这对于性能和速度上的提升是显而易见的, 基本上,在一定范围之内,增加资源与性能的提升,是成正比的;写完了一个复杂的spark作业之后,进行...原创 2020-03-10 08:42:33 · 145 阅读 · 0 评论 -
spark入门到精通(1)
Spark学习第一天了解spark,以及一些简单的基础 1.学习目标 了解spark相关背景以及其框架特点 掌握搭建spark集群(尤其是高可用集群搭建) (重点) 掌握spark应用程序开发以及运行 (重点) 掌握Spark框架中的角色 (重点) 2.Spark基础 2.1什么是Spark Spark是一种快速、通用、可扩展的大数据分析引擎,2009...原创 2020-02-26 19:44:18 · 573 阅读 · 0 评论