
大数据运维hive
文章平均质量分 70
hive搭建学习
2021xyz666
技术改变人生
技术改变世界
展开
-
【hive】 union 与 union all使用注意事项
union allunion相同点: 相当于上下拼接 ;联合多个select语句的结果集合并为一个单独的结果集不同点: union有去重效果,速度会更慢;union all 使用注意事项:1.需要保证select中字段须一致,每个select语句返回的列的数量和名字必须一样,否则会报错。在1.2.1后的版本中出现一次union all对应列名不一致也不报错;但是多次union all列名必须一致否则会报错;建议直接列名保持一致即可;例如:##以上会可能会出现报错;但是使用别...原创 2021-08-31 23:42:38 · 6664 阅读 · 0 评论 -
【Hive】空值NULL与空字符串‘‘对比分析
hive命令行hive --help--config hive配置文件路径--service hive 服务--auxpath 添加jar包(多个jar包用:分割)转载 2021-08-31 23:17:18 · 2969 阅读 · 0 评论 -
hive任务报错SELECT DISTINCT ‘org.apache.hadoop.hive.metastore.model.MPartition‘
问题描述:hive执行INSERT OVERWRITE TABLE操作时在最后阶段任务出现报错:FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. MetaException(message:Exception thrown when executing query : SELECT DISTINCT 'org.apache.hadoop.hive.metastore.model.原创 2021-04-30 22:56:31 · 5351 阅读 · 1 评论 -
hive设置中文编码格式utf-8
111转载 2021-01-04 16:33:56 · 20029 阅读 · 1 评论 -
hive运行mapreduce任务出现报错Error during job, obtaining debugging information...
问题描述:hive建表之后进行insert数据插入操作时,出现以下报错:Error during job, obtaining debugging information...解决步骤:实际上导致执行hive出现该报错信息的原因非常多,通过网上搜索相关报错信息发现很多人说是namenode或者hive等的jvm内存不足,结果实际测试发现调大内存也不行;并且此时我实际执行wordcount测试用例又能成功运行;据此也基本可以排除jvm内存不足的问题;网上不少人提议采用本原创 2020-10-23 16:47:50 · 2346 阅读 · 3 评论 -
hue的安装与集成hive使用
hue官网:http://gethue.comhue cdh版本下载地址:http://archive.cloudera.com/cdh5/cdh/5/搜索 hue-3.9.0-cdh5.16.1.tar.gz; 查找匹配自己hadoop集群,hive版本;官方安装文档地址:http://archive.cloudera.com/cdh5/cdh/5/hue-3.9.0-cdh5.16.1/admin-manual/manual.htmlmaven下载地址:http://m.原创 2020-09-22 15:44:59 · 1252 阅读 · 1 评论