一、数据类型
1、基本数据类型
据初步使用经验来看,最常使用的数据类型为string,double和bigint。string类型相当于数据库的varchar类型,该类型是一个可变的字符串,不过它不能声明其中最多能存储多少个字符(是没有string(20)这样的写法),理论上它可以存储2GB的字符数。
基本数据类型如下表:
Hive数据类型 | Java数据类型 | 长度 | 例子 |
---|---|---|---|
TINYINT | byte | 1byte有符号整数 | 20 |
SMALINT | short | 2byte有符号整数 | 20 |
INT | int | 4byte有符号整数 | 20 |
BIGINT | long | 8byte有符号整数 | 20 |
BOOLEAN | boolean | 布尔类型,true或者false | TRUE FALSE |
FLOAT | float | 单精度浮点数 | 3.14159 |
DOUBLE | double | 双精度浮点数 | 3.14159 |
STRING | string | 字符类型,可以指定字符集;可以使用单引号或者双引号 | ‘now is the time’ “for all good men” |
TIMESTAMP | 时间类型 | ||
BINARY | 字节数组 |
2、集合数据类型
1)类型介绍
Hive有三种复杂数据类型ARRAY、MAP 和 STRUCT。ARRAY和MAP与Java中的Array和Map类似,而STRUCT与C语言中的Struct类似,它封装了一个命名字段集合,复杂数据类型允许任意层次的嵌套。
数据类型 | 描述 | 语法示例 | 访问方式 |
---|---|---|---|
STRUCT | 和c语言中的struct类似,都可以通过“点”符号访问元素内容。 | address字段:struct<street:string, city:string> | address.street或address.city:通过元素名称访问值 |
MAP | MAP是一组组键-值对元组集合,使用数组表示法可以访问数据。 | children字段:map<string, int> | children[‘xiao song’]:通过“键”访问“值” |
ARRAY | 数组是一组具有相同类型和名称的变量的集合,这些变量称为数组的元素。 | friends字段:array<string> | friends[0]:编号控制访问第几个元素,注意编号从零开始 |
2)使用方法举例
a. 建表,其中字段为集合类型
b. 创建cj_p_test文件:touch cj_p_test.txt;
c. 编辑文件:vi cj_p_test.txt;
d. 写入测试数据:
e. 文件数据导入表中,这里使用封装命令:
f. 访问测试数据:
3、类型转化
HIVE数据类型可以进行隐式转换,但不支持反向转化且会报错,除非使用CAST操作。
1)隐式类型转换规则
- 任何整数类型都可以隐式地转换为一个范围更广的类型,如TINYINT可以转换成INT,INT可以转换成BIGINT。
- 所有整数类型、FLOAT和STRING类型都可以隐式地转换成DOUBLE。
- TINYINT、SMALLINT、INT都可以转换为FLOAT。
- BOOLEAN类型不可以转换为任何其它的类型。
2)使用CAST操作显式转换
例如CAST(‘1’ AS INT)将把字符串’1’ 转换成整数1;如果强制类型转换失败,如执行CAST(‘X’ AS INT),表达式返回空值 NULL。