使用SparkSql读取Mysql数据

最新推荐文章于 2025-04-08 21:57:53 发布

大霖技术进阶

最新推荐文章于 2025-04-08 21:57:53 发布

阅读量788

点赞数 1

文章标签： spark

本文链接：https://blog.youkuaiyun.com/qq_39570355/article/details/117152549

版权

import org.apache.spark.sql.SparkSession

object MysqlRead {

  def main(args: Array[String]): Unit = {

    val spark = SparkSession.builder()
      .master("local[6]")
      .appName("mysql read")
      .getOrCreate()

    //从mysql中读取数据
   //注意 提前需要在pom文件加入jdbc驱动依赖
    val readDF = spark.read.format("jdbc")
      .option("url", "jdbc:mysql://hadoop100:3306/spark_test")
      .option("dbtable", "student10k")
      .option("user", "root")
      .option("password", "root")
      .load()

    readDF.show(1)

    spark.stop()

  }

}