
错误记录
猛肝自然强
这个作者很懒,什么都没留下…
展开
-
hive中union出现的类型问题
错误信息:FAILED: SemanticException Schema of both sides of union should match: Column create_date is of type string on first table and type date on second table. Cannot tell the position of null AST.出现原因:使用日期函数进行计算时,结果数据为日期类型,不能与字符串直接进行union解决办法:使用格式化原创 2020-10-20 19:26:16 · 2582 阅读 · 0 评论 -
presto-cli 查询hive数据报错:Catalog ‘hive‘ does not exist
错误描述使用prsto-cli进行hive查询时,报错Catalog ‘hive‘ does not exist同时可视化界面无法查找到hive的catalog错误原因在presto/etc目录下,没有把hive.properties放入到catalog目录下原创 2020-10-08 11:03:51 · 2402 阅读 · 1 评论 -
解决一个使用DataGrip连接hive使用一段时间hiveserver2报oom错误的问题
报错日志:情景描述:使用hive版本 3.1.2使用一段查询语句之后,会卡在DataGrip的自动同步上面:问题解释:新版本的hive启动的时候,默认申请的jvm堆内存大小为256M,jvm堆内存申请的太小,导致后期开启本地模式,执行复杂的sql时经常会报错:java.lang.OutOfMemoryError: Java heap space,因此最好提前调整一下HADOOP_HEAPSIZE这个参数。解决方法:(1) 修改$HIVE_HOME/conf下的hive-env.sh.tem原创 2020-10-08 09:26:01 · 1643 阅读 · 0 评论 -
Failed to execute goal net.alchim31.maven:scala-maven-plugin:3.4.6:compile (default) on project spar
scala代码打包是报错:Failed to execute goal net.alchim31.maven:scala-maven-plugin:3.4.6:compile (default) on project spark_wordcount: wrap: org.apache.commons.exec.ExecuteException: Process exited with an error: 1 (Exit value: 1)查询网站说是版本错误,确认了一下版本没有错误.之后查看报错出现的原创 2020-09-21 20:19:41 · 2029 阅读 · 0 评论 -
SparkSubmit 进程无法使用kill -9 杀死的解决办法
在使用spark时,出现了SparkSubmit进程杀死的问题,原因是进程存在父进程.解决办法,杀死对应的父进程:此时输入kill -9 2284,之后:可以看到SparkSubmit 已经被杀死原创 2020-09-21 18:22:18 · 2651 阅读 · 1 评论 -
错误记录:java.lang.Exception: Method isAll should have no parameters
进行模块测试时报错:java.lang.Exception: Method isAll should have no parameters.原因:在使用junit进行模块测试时,需要使用内部的其他方法,错误的将@Test注解添加到不需要运行的方法上,去掉isAll上的注解之后解决。...原创 2020-08-07 20:01:15 · 921 阅读 · 0 评论