spark
关注
分享
扫一扫
超短腿迪迦
超长腿迪迦Chl
展开
-
Mysql-＞Hudi-＞Hive
抽取mysql数据到hudi并关联hive原创 2023-09-11 14:40:38 · 405 阅读 · 4 评论 -
spark集成hudi
spark集成hudi原创 2023-09-09 11:03:48 · 504 阅读 · 0 评论 -
sparksql读取数据过大报java.lang.OutOfMemoryError: Java heap space
【代码】sparksql读取数据过大报java.lang.OutOfMemoryError: Java heap space。原创 2023-04-12 21:16:14 · 807 阅读 · 0 评论 -
idea连接mysql版本更换(两种方法)
注意username会报错，用user。原创 2023-04-01 17:26:38 · 1268 阅读 · 0 评论 -
【已解决】idea连接hive3.1.2读取数据报错
将默认的IP访问改为域名访问的形式。原创 2023-04-01 16:21:41 · 465 阅读 · 0 评论 -
java.lang.NoSuchMethodError: org.apache.hadoop.fs.FSOutputSummer.＜init＞(Ljava/util/zip/Checksum；II)
Spark抽取数据(mysql->hive)报错原创 2023-03-28 10:30:21 · 243 阅读 · 0 评论 -
idea创建spark项目时，引入了SparkSession依赖，仍然报错，没有这个包
idea创建spark项目时，引入了SparkSession依赖，仍然报错，没有这个包原创 2023-03-01 11:50:28 · 959 阅读 · 0 评论 -
Spark-shell报error: not found错误
Spark-shell报error: not found错误原创 2023-02-13 00:17:01 · 629 阅读 · 0 评论 -
java.io.EOFException: End of File Exception between local host is: “master/192.168.128.130“； destina
java.io.EOFException: End of File Exception between local host is: "master/192.168.128.130"; destina原创 2023-02-12 23:13:09 · 1500 阅读 · 0 评论 -
【已解决】Not a valid command: sbt-version (similar: writeSbtVersion, session)
Not a valid command: sbt-version (similar: writeSbtVersion, session)原创 2023-02-09 00:51:52 · 837 阅读 · 1 评论