Spark ~ 获取变量的类型

蔡大远

于 2021-01-27 15:11:47 发布

阅读量468

点赞数

CC 4.0 BY-SA版权

分类专栏： Spark 文章标签： spark

本文链接：https://blog.youkuaiyun.com/cai_and_luo/article/details/113249504

Spark 专栏收录该内容

31 篇文章

订阅专栏

本文介绍了如何使用Spark来获取变量的类型。通过使用`getClass.getCanonicalName`方法，可以确定由Spark RDD产生的集合的具体类型。示例代码展示了创建一个包含数字范围的RDD，并输出其收集结果的类型为`Int[]`。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Spark ~ 获取变量的类型

.getClass.getCanonicalName

        val sc = new SparkContext(config)
        val rdd = sc.makeRDD(1 to 10,2)
        println(rdd.collect().getClass.getCanonicalName)

		输入
		1 2 3 4 5
		6 7 8 9 10
		输出
		Int[]