本文介绍了Resilient Distributed Datasets (RDD) 的基本概念、操作示例及其在Apache Spark中的应用。文中还详细探讨了两种分区器：HashPartitioner 和 RangePartitioner，并以 NewHadoopRDD 和 WholeTextFileRDD 为例展示了它们的内部实现。
RDD操作例子：
RDD的依赖和运行时
深入RDD:
另一种Partitioner是RangePartitioner:
以NewHadoopRDD为例，其诶不的信息如下所示：
以WholeTextFileRDD为例，其内部的信息如下：
spark架构设计&编程模型01
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
