spark sql 操作mysql

本文探讨了使用Spark连接MySQL时,在Eclipse环境中遇到的问题——找不到合适的驱动。虽然已在SPARK_CLASSPATH中加入MySQL驱动包,但在Eclipse中仍无法正常工作。通过打包并在spark-submit中运行,则可以成功解决此问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

尝试了一下,用spark操作mysql,发现在eclipse客户端出现no suitable driver found for jdbc:mysql://ip:3306/xxxx?user=xxx&password=xxx,其实已经在spark-env.sh中的SPARK_CLASSPATH中加入了mysql的驱动包,应该不会出问题啊,果断打包在./spark-submit运行,结果没有问题,看来eclipse运行时没有自动调用spark的配置文件啊!
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值