Spark
xiaonaughty
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
combineByKey
/** * Generic function to combine the elements for each key using a custom set of aggregation * functions. This method is here for backward compatibility. It does not provide combiner * classt转载 2016-06-30 11:13:06 · 511 阅读 · 0 评论 -
动态资源分配(Dynamic Resource Allocation)
转自:http://zhangxiong0301.iteye.com/blog/2192641从spark1.2开始,可以根据application的负载动态地增加和减少分配给application的资源。也就是说,你的application在不需要资源的时候会把资源退还给集群,而在需要的时候重新申请获得资源。这在spark集群上有多个application时候很有用。当分配给某个applicati转载 2016-06-30 18:14:28 · 5587 阅读 · 0 评论
分享