Java 操作 Spark 时却不能设置泛型参数的问题？

最新推荐文章于 2022-01-05 07:43:14 发布

原创最新推荐文章于 2022-01-05 07:43:14 发布 · 306 阅读

0 ·

CC 4.0 BY-SA版权

spark 专栏收录该内容

2 篇文章

订阅专栏

在使用Java开发Spark过程中，遇到了无法设置返回对象的泛型参数的问题。具体表现为在尝试使用JavaSparkContext的parallelizePairs方法时，直接设置泛型参数会引发错误。

最近在使用Java开发spark 过程中遇到一个问题即不能设置返回对象的泛型参数

代码如下

jssc 为 JavaStreamingContext

使用 JavaSparkContext 也会遇到这种情况

List<Tuple2<String, Boolean>> blacklist = new ArrayList<Tuple2<String, Boolean>>();
		blacklist.add(new Tuple2<String, Boolean>("tom", true));

		JavaPairRDD t1T2JavaPairRDD = jssc.sparkContext().parallelizePairs(blacklist);
//  如果设置泛型参数就会报错
		JavaPairRDD<String,Boolean> t1T2JavaPairRDD1 = jssc.sparkContext().parallelizePairs(blacklist);

目前不太明确原因