天亮了

在进行Hive集成Mysql作为元数据过程中，做完所有安装配置工作后，进入到hive模式，执行show databases；执行正常，接着执行show tables；时却报错。关键错误信息如下：com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Specified key was too long; max key leng

hive的使用中不可避免的需要对null、‘’（空字符串）进行判断识别。但是hive有别于传统的数据库。下面一一说明：（1）不同数据类型对空值的存储规则int与string类型数据存储，null默认存储为 \N；string类型的数据如果为""，存储则是""；另外往int类型的字段插入数据“”时，结果还是\N。 （2）不同数据类型，空值的查询对于int可以使用is

hive数据去重，并根据需求取其中一条数据案例：name  adx       tran_id                 cost        ts       ck        5        125.168.10.0          33.00   1407234660ck        5        187.18.99.00          33.32

--场景描述：将查询结果记录每行内容的列先按逗号（，）分割，然后再将多行内容用&符号存为一行内容例如：id name age8 liu 199 zhang 2010 li 25要求转化为：8,liu,19&9,zhang,20&10,li,25--实现脚本SELECT concat_ws('&', collect_set(

场景：查询结果封装成json格式实现：封装记录为json格式可以编写自定义函数，也可以直接使用concat函数直接拼接，下面直接使用concat函数拼接实现将数据行转化为json数据select concat('{\"id\":\"',              t.id,              '\",\"index_date\":\"',              NV

业务场景：工作中经常需要将关系型数据库（Oracle、MySQL）中的表导入到hive中进行大数据运算，故编写快捷的脚本实现，脚本名为：RDBtoHive.sh。实际案例：将Oracle中表tbl_o_test 数据导入到hive 的表  tbl_h_test 中，这里表  tbl_h_test 的结构及字段顺序同表tbl_o_test  一致，注意字段类型可以不一致，但是字段顺序需一