weixin_44584293的博客

一、 前言：1、产生背景:MapReduce是对hadoop的数据批处理的一个解决方案，MapReduce将计算作业分布到集群的各个节点上执行，从而降低计算成本并且提高可扩展性，但是对于MapReduce的学习成本较高，要会JAVA，所以后来Facebook诞生了Hive2、什么是Hive?Hive是基于Hadoop的数据仓库，可以将结构化的文件，比如结构化的文本文件，映射成数据表，并且...

前言hive中操作hdfs上的数据可以像操作mysql数据库一样方便轻松，避免编写mapreduce程序，又提高了数据分析查询的速度和效率，下面就来总结一下自己前些天学的表的DDL 其实和mysql差不多 但是有一点需要注意，hive是读检查，写不检查，也就是是hive在你查询的时候才验证数据的有效性，加载数据时不检查，直接加载，这样的好处是加快了处理数据的速度，如果数据量很大，加载是检查会严...

这几天遇到一个坑 整了我好几天了，就是hive删除表之后是显示成功，但是再运行show tables就提示错误，说数据库找不到，再重新启动hive查看表，发现不表并没有删除，大概每天浪费了两三个小时来解决最终感谢这位大哥的博客Hive database does not exist 排查是mysql驱动问题，其实刚开始我就怀疑是驱动版本问题...

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:Unable to clean up com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Table ‘hive.TXN_...