
Spark
Spark
Stackflowed
这个作者很懒,什么都没留下…
展开
-
SparkStreaming本地Local模式启动接收不到数据
问题:SparkStreaming接收不到数据,并未报Error错误,打印如下信息:20/05/06 01:18:29 INFO memory.MemoryStore: Block input-0-1588699109200 stored as values in memory (estimated size 32.0 B, free 1994.9 MB)20/05/06 01:18:29 ...原创 2020-05-06 01:40:12 · 2091 阅读 · 0 评论 -
java.lang.NoSuchMethodError: com.fasterxml.jackson.module.scala.deser.BigDecimalDeserializer$.handle
问题:SparkStreaming开发过程中,遇到了jackson包版本问题:java.lang.NoSuchMethodError: com.fasterxml.jackson.module.scala.deser.BigDecimalDeserializer$.handledType()Ljava/lang/Class;但在spark-streaming的pom依赖中可以发现其实是已经...原创 2020-05-06 01:19:46 · 821 阅读 · 0 评论 -
java.lang.NoSuchMethodError: io.netty.buffer.PooledByteBufAllocator.defaultNumHeapArena()I
问题:SparkStreaming开发过程中,遇到了netty版本冲突问题:Exception in thread "main" java.lang.NoSuchMethodError: io.netty.buffer.PooledByteBufAllocator.defaultNumHeapArena()I使用Maven命令查看pom依赖(或者直接使用IDEA的Maven面板查看):m...转载 2020-05-06 00:58:44 · 3834 阅读 · 3 评论 -
spark-sql启动报错
问题:spark-sql启动报错信息如下:Caused by: java.sql.SQLException: No suitable driver found for jdbc:mysql://lee000:3306/hadoop_hive?createDatabaseIfNotExsit=true at java.sql.DriverManager.getConnection(Driver...原创 2020-03-04 13:26:45 · 1114 阅读 · 1 评论