- 博客(1)
- 收藏
- 关注
RSS订阅原创 Spark调优
SPARK方面做的优化1 SPARKSpark是一个分布式的计算平台，类同Hadoop的Map/Reduce思想，提出了一个新的数据结构RDD（弹性分布式数据集），在该数据集合上提供了一系列API，更方便开发者使用Spark进行分布式数据处理，同时可高效的使用集群内存。1.1 集群本身针对集群自身的配置参数设置的一些优化，主要是Spark运行时的一些参数设置，例如，任务并行度、Dr
2017-12-22 21:13:12
1474
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人