<6> hive 表属性操作

本文详细介绍Hive中表属性的操作方法,包括修改表名、增加及修改列、更改表属性如注释和分隔符,以及内部表与外部表的转换。适用于需要掌握Hive数据管理技能的数据库管理员和数据工程师。

表属性操作
修改表名
create table if not exists testchange(name string,value string);
alter table testchange rename to a2;

增加列(默认添加到最后)
alter table tablename add columns(c1 string,c2 long);
alter table a2 add columns(id int,type boolean);

修改列名(boolean修改不了,还是要遵循字段类型转换规则)
alter table table_name change column c1,c2 int comment 'xxx' after xx;
alter table a2 change column id ids int[first/after xx];

修改表属性
修改注释
alter table a2 set tblproperties('comment' = 'xxxxx');

修改分隔符
alter table a2 set serdeproperties('field.delim'=',');
alter table a2 set serdeproperties('collection.items'='|');
alter table a2 set serdeproerties('map.keys'=':');

修改分区表的分隔符在表后面添加分区就好咯(对新的分区没影响,旧的分区需要加上关键字partition才有效)
alter table a2 partition(dt='20180816') set serdeproperties('field.delim'=',');

表属性操作
修改location
alter table a4 set location 'path';(0.13中path是hdfs的绝对路径,2.1.1可以不用写绝对路径)
内部表转外部表/外部表转内部表
alter table a4 set tblproperties('EXTERNAL'='FALSE');(外部转内部)
alter table a4 set tblproperties('EXTERNAL'='TRUE');(内部转外部)

本关任务:在已安装Hadoop的基础上安装配置好Hive并运行。 相关知识 为了完成本关任务,你需要掌握: 1.Hive的基本安装; 2.Mysql的安装与设置; 3.Hive 的配置。 注意:本关实训Hive的安装与配置建立在Hadoop已安装配置好的情况下。 Hive 的基本安装 从 官网 下载Hive二进制包,不过这里你无须再从网上下载,我已经帮你下载好了放在/opt目录下。 进入/opt目录,解压apache-hive-3.1.0-bin.tar.gz到该目录下,并将解压的文件重命名为hive; cd /opt tar -zxvf apache-hive-3.1.0-bin.tar.gz mv apache-hive-3.1.0-bin hive 设置环境变量,编辑vi /etc/profile,在末尾添加以下两行代码; export HIVE_HOME=/opt/hive export PATH=$HIVE_HOME/bin:$PATH source /etc/profile使环境生效; 查看hive是否安装成功:hive --version。 出现hive版本就说明安装成功,但是可以看到其中有一些警告信息,是由于包的冲突引起的。我们只需删除掉引起冲突的包即可:rm /opt/hive/lib/log4j-slf4j-impl-2.10.0.jar。 Mysql 的安装与设置 平台已安装MySQL数据库,同学们在本地没有安装可以采用以下命令进行安装: sudo apt-get install mysql-server #安装mysql服务 apt-get install mysql-client #安装mysql客户端 sudo apt-get install libmysqlclient-dev #安装相关依赖环境 注意:安装过程中会提示设置密码什么的,不要忘了设置。 安装完成之后可以使用如下命令来检查是否安装成功。 sudo netstat -tap | grep mysql 通过上述命令检查之后,如果看到有MySQL的socket处于listen 状态则示安装成功。 Hive需要数据库来存储metastore的内容,因此我们需要配置一下MySQL数据库。 下载mysql驱动; 我已经帮你下载好放在/opt目录下,进入该目录并进行以下操作: tar -zxvf mysql-connector-java-5.1.45.tar.gz cd mysql-connector-java-5.1.45 cp mysql-connector-java-5.1.45-bin.jar /opt/hive/lib/ 接下来介绍MySQL为Hive做的设置。 使用root用户登录MySQL数据库; mysql -uroot -p123123 -h127.0.0.1 创建数据库实例hiveDB; create database hiveDB; 创建用户bee,密码为123123; create user 'bee'@'%' identified by '123123'; 授权用户bee拥有数据库实例hiveDB的所有权限; grant all privileges on hiveDB.* to 'bee'@'%' identified by '123123'; 刷新系统权限。 flush privileges; Hive 的配置 在/opt/hive/conf目录下,修改hive-site.xml和hive-env.sh两个文件。 hive-site.xml hive-site.xml保存Hive运行时所需要的相关配置信息。 如果目录下没有该文件,我们直接创建一个:vi hive-site.xml,将以下内容复制到其中(按i进入编辑模式后再进行粘贴)。 <?xml version="1.0" encoding="UTF-8" standalone="no"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <configuration> <!-- WARNING!!! This file is auto generated for documentation purposes ONLY! --> <!-- WARNING!!! Any changes you make to this file will be ignored by Hive. --> <!-- WARNING!!! You must make your changes in hive-site.xml instead. --> <!-- Hive Execution Parameters --> <property> <name>hive.metastore.warehouse.dir</name> <value>/opt/hive/warehouse</value> </property> <property> <name>hive.exec.scratchdir</name> <value>/opt/hive/tmp</value> </property> <property> <name>hive.querylog.location</name> <value>/opt/hive/logs</value> </property> <property> <name>hive.server2.thrift.port</name> <value>10000</value> </property> <property> <name>hive.server2.thrift.bind.host</name> <value>localhost</value> </property> <property> <name>hive.server2.enable.doAs</name> <value>true</value> </property> <property> <name>hive.session.id</name> <value>false</value> </property> <property> <name>hive.session.silent</name> <value>false</value> </property> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://localhost:3306/hiveDB?createDatabaseIfNotExist=true</value> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.jdbc.Driver</value> </property> <property> <name>javax.jdo.option.ConnectionUserName</name> <value>bee</value> <!-- 这里是之前设置的数据库 --> </property> <property> <name>javax.jdo.option.ConnectionPassword</name> <!-- 这里是数据库密码 --> <value>123123</value> </property> </configuration> 完成后,在命令行模式(按 Esc),输入:wq保存退出。 hive-env.sh 由于Hive是一个基于Hadoop分布式文件系统的数据仓库架构,主要运行在 Hadoop分布式环境下,因此,需要在文件hive-env.sh中指定Hadoop相关配置文件的路径,用于Hive访问HDFS(读取fs.defaultFS属性值)和 MapReduce(读取mapreduce.jobhistory.address属性值)等Hadoop 相关组件。 如果目录下没有该文件,我们就以模板复制一个cp hive-env.sh.template hive-env.sh。vi hive-env.sh打开文件,在文件末尾添加变量指向 Hadoop 的安装路径: HADOOP_HOME=/usr/local/hadoop #在本地环境安装,要根据自己hadoop的路径来确定 至此Hive配置完成。 第一次启动Hive前还需要执行初始化命令:schematool -dbType mysql -initSchema。 编程要求 请仔细阅读左侧文档知识点,根据提示,在右侧命令行区域进行 Hive 环境搭建,具体任务如下: 根据上述步骤完成Hive的安装与配置 然后在命令行start-dfs.sh启动 Hadoop 点击测评,验证hive是否成功安装配置。
06-13
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值