1、hive的存储结构包括数据库、表、视图、分区和表数据等。(其中数据库,表,分区等都对应hdfs上的一个目录,表数据对应hdfs对应目录下的文件)
2、hive中所有的数据都存储在hdfs中,没有专门的数据存储格式,因为hive是读模式 可支持TextFile,SequenceFile,RCFIle或者自定义格式等
3、只需要在创建表的时候告诉hive数据中的列分隔符和行分隔符,hive就可以解析数据
hive的默认列分隔符:控制符 (Ctrl+A)\x01
hive的默认行分隔符:换行符 \n
4、hive中包含以上数据模型:
database:在 HDFS 中表现为${hive.metastore.warehouse.dir}目录下一个文件夹
table:在 HDFS 中表现所属 database 目录下一个文件夹
external table:与 table 类似,不过其数据存放位置可以指定任意 HDFS 目录路径
partition:在 HDFS 中表现为 table 目录下的子目录
bucket:在 HDFS 中表现为同一个表目录或者分区目录下根据某个字段的值进行 hash 散 列之后的多个文件
view:与传统数据库类似,只读,基于基本表创建
5、Hive 的元数据存储在 RDBMS 中,除元数据外的其它所有数据都基于 HDFS 存储。默认情 况下,Hive 元数据保存在内嵌的 Derby 数据库中,只能允许一个会话连接,只适合简单的 测试。实际生产环境中不适用,为了支持多用户会话,则需要一个独立的元数据库