weixin_53299145的博客

一、使用hive-site.xml第一步：将集群中的hive-site.xml的内容复制出来，并放在idea项目的resources下，要求文件命名为：hive-site.xml<configuration> <property> <name>datanucleus.schema.autoCreateAll</name> <value>true</value> </property><pr

#分区中的参数不要与原表中的参数一样；#多个参数或是多个分区参数用，隔开#row foramat…是指定列切割符，lines terminated by '切割符’是指定行切割符操作分区表查看表的分区 SHOW PARTITION 表名；增加分区#增加单个分区ALTER TABLE 表名 ADD PARTITION(列名称 数据类型);#增加多级分区ALTER TABLE 表名 ADD PARTITION(列名称 数据类型) PARTITION(列名称 数据类型);删除分

一、准备数据因为数据目前在本地，所以先将数据上传至Hive，再进行清洗。上传步骤：1、将数据上传至虚拟机中：使用rz -E 选择文件2、进入hive，选择数据库，并进行建表create table data(TRIP_ID string,CALL_TYPE string,ORIGIN_CALL string,ORIGIN_STAND string,TAXI_ID string,TIME_STAMP string,DAY_TYPE string,MISSING_DATA string,PO

一、HQL建表语法格式（hql不区分大小写，[ ]中的属性是可选属性）CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name[ (col_name data_type [COMMENT col_comment], ...) ][COMMENT table_comment][PARTITIONED BY(col_name data_type [COMMENT col_comment],...) ][CLUSTERED BY (col_name,col_