IDEA中java语言编写spark连接mysql数据库

最新推荐文章于 2021-12-10 16:30:40 发布

wxxxxxy

最新推荐文章于 2021-12-10 16:30:40 发布

阅读量1.1k

点赞数 3

本文链接：https://blog.youkuaiyun.com/qq_37729620/article/details/89332925

版权

本文介绍如何在IntelliJ IDEA的Maven工程中，使用Java语言编写Spark程序连接并从MySQL数据库获取数据。首先需要导入相关依赖，然后通过代码连接数据库并获取表中的数据。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

我再idea中用的是maven工程

1、导入相应的依赖

    <properties>
        <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
        <spark.version>2.2.0</spark.version>
        <scala.version>2.11</scala.version>
        <hadoop.version>2.6.0</hadoop.version>
    </properties>

    <dependencies>
        <dependency>
            <groupId>org.apache.spark</groupId>
            <artifactId>spark-core_${scala.version}</artifactId>
            <version>${spark.version}</version>
        </dependency>
        <dependency>
            <groupId>org.apache.spark</groupId>
            <artifactId>spark-sql_${scala.version}</artifactId>
            <version>${spark.version}</version>
        </dependency>
        <dependency>
            <groupId>org.apache.spark</groupId>