
spark
H.King
专注大数据相关技术
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Spark 创建RDD (集合,本地文件,hdfs文件)基础数据源
本文主要记录 一些基础 数据源 转换 成为 RDD 的案例 仅供参考 1.集合类转换为RDD import java.util.Arrays; import java.util.List; import org.apache.spark.SparkConf; import org.apache.spark.api.java.JavaRDD; import org.apache....原创 2018-09-12 14:54:20 · 2471 阅读 · 0 评论 -
Java 操作 Spark 时 却不能设置泛型参数的问题 ?
最近在使用Java开发spark 过程中 遇到一个问题 即不能设置 返回对象的泛型参数 代码如下 jssc 为 JavaStreamingContext 使用 JavaSparkContext 也会遇到这种情况 List<Tuple2<String, Boolean>> blacklist = new ArrayList<Tuple2<Str...原创 2019-09-10 20:23:21 · 293 阅读 · 0 评论