Spark DataFrame读写数据库（Mysql）--记录

最新推荐文章于 2025-06-16 23:27:23 发布

Enche

最新推荐文章于 2025-06-16 23:27:23 发布

阅读量2.8k

点赞数 1

CC 4.0 BY-SA版权

分类专栏：机器学习

本文链接：https://blog.youkuaiyun.com/Enche/article/details/79932259

本文展示了如何使用Spark DataFrame从MySQL数据库读取数据并将其保存回数据库。示例代码包括从数据库读取数据到DataFrame，显示DataFrame内容，以及将DataFrame数据写入MySQL的特定表中。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >


从数据库读数据，返回DataFrame

import org.apache.spark.sql.SparkSession
import java.util.Properties
object RWJdbc {
  def main(args: Array[String]): Unit = {
    val spark = SparkSession.builder().master("local[*]").getOrCreate()
    //数据库url地址
    val url = "jdbc:mysql://localhost:3306/test"
    //表名