【1】HIve升级到新版本过程

最新推荐文章于 2024-07-21 10:32:14 发布
最新推荐文章于 2024-07-21 10:32:14 发布 · 189 阅读 · 0
文章标签：

#Hadoop

本文提供了一个详细的步骤来指导如何从旧版本的Hive迁移到新版本。包括更改名称、复制配置文件、设置环境变量、迁移依赖包及重启服务等关键操作。

1:

将原有的hive改名为hive_backup
2:

将原有hive中的conf文件夹全部复制到新版本hive中
3：

修改hive-conf.sh 文件 添加HADOOP_HOME
4：

相关第三方的包要转移到新的hive版本lib目录下
5：

首先要把之前的10000端口对应的线程kill掉，
然后 $HIVE_PORT=10000 bin/hive --service hiveserver

 

Hive升级
weixin_42001459的博客
04-20 507
场景：将hive0.13 升级到hive1.2.2在下载的hive1.2.2的安装包中没有从0.13直接升级到1.2.2，而需要从0.13升级到0.14，之后再由0.14升到1.1，最终升到1.2在$HIVE_HOME/scripts/metastore/upgrade 下有对应的元数据存放的数据库，如，MySQL，PostgreSQL；原来的是MySQL类型，进入到MySQL目录下，这里有相关的...
CDH集群的hive升级
zhyajshhz的专栏
09-23 4464
简介 我们的CDH集群使用的是6.3.0版本，默认的hive版本是2.1.1，在使用过程中发现presto创建的orc表，在hive中查询报错，在spark中查询不到数据。但hive或者spark生成的orc表，presto可正常使用。因为需要使用apache atlas，故升级了hive到3.1.2，发现hive中可正确查询presto生成的orc表，但spark依然查询不了，肯定了是hive版本导致的问题，排查以后，替换spark目录下hive目录下的hive的jar包，就可以正确查询presto生成的
hive升级
qq_29376831的博客
03-01 781
升级主要说明： 1.为避免升级前后数据偏差，关闭一切写入表的操作 ，【实际采用了并行执行，并未中断写入，只是copy 一份份元数据，升级后，再回补新数据库缺失的数据】 2.hive升级：2.1–>2.3.7 我们元数据库是mysql 2.1 emr集群上执行以下命令： cd /usr/lib/hive/scripts\metastore\upgrade\mysql/ mysql -h host -P 3306 -u litbaws -p 密码 hive < upgrade-2.1.0-to-.
CDH 之 hive 升级至 hive-3.1.3 完美踩坑过程
予挚之的博客
06-08 4670
这是博主在升级过程中遇到的问题记录，大家不一定遇到过，如果不是 CDH 平台的话，单是 hive 服务升级应该是不会有这些问题的，且升级前博主也参考过几篇相关 CDH 升级 hive 服务的博文，前面的升级步骤基本一致，但是升级过程只有我遇到了这些问题吗？单拎出来这些报错，度娘多多少少还是可以找到一些类似的解决方案，不过经过博主测试，都不能解决出现的问题，因此才有了此篇博文，当然最后也完美解决了所有问题，不保证后面使用过程中是否会出现问题，因为还没有进一步测试，但是升级和使用，是没有问题的。！
hive3在升级
窦永厚
09-06 914
VERSION需要更改一下版本号。DBS需要更新数据库对应的路径。
Ambari下Hive3.0升级到Hive4.0
03-25
升级 Hive 从 3.0 到 4.0 是一个复杂的过程，涉及到多个环节，需要谨慎操作。遵循上述步骤，结合 Ambari 的自动化管理能力，可以有效地降低升级风险，确保大数据集群的稳定性和效率。在整个过程中，持续学习和理解...
CDH6.3.2之升级Hive-3.1.3.doc
03-06
总结：升级Hive的过程涉及到多个关键步骤，包括备份、下载新版本、替换文件、升级数据库以及重启服务等。每一步都需要仔细操作，确保不遗漏任何细节。通过遵循上述步骤，可以安全高效地完成Hive版本的升级工作。
cdh6.1.1的hive升级到CDH6.3.2的hive
最新发布
十八闲客的博客,专注于大数据运维
07-21 1092
我们查看 upgrade-2.1.1-cdh6.1.0-to-2.1.1-cdh6.2.0.mysql.sql 这个脚本，发现只是对 DBS 表新增了一个CREATE_TIME字段，然后再更新了一些CDH_VERSION的SCHEMA_VERSION信息，没有重大的变更。只需要把这个cdh6.1.1的hive包exec在spark的hive文件夹中更新掉CDH6.3.2的即可。在编译的过程中，发现有些Cloudera的包下载不下来的，需要新添加mirror。在IDEA中查找代码发现，确实是少了这个字段.
cdh6.3.2升级hive至3.x后登陆HiveServer2连接失败.doc
03-01
- 当从旧版本的 Hive 升级到 3.x 版本时，可能存在某些配置项在新版本中有不同的默认行为或限制。在这种情况下，`hive.query.redaction.rules` 在运行时的修改被阻止了。 #### 三、解决方案 根据提供的部分内容，...
hive的安装和升级
weixin_30888027的博客
04-08 183
目录 目录 安装 升级 检查环境 参考 目录 安装 升级 安装 nohup hive –service hiveserver & 启动： sudo nohup ./hive --service me...
通俗易懂的Hive升级版教程（含配套资料）
06-15
Hive是基于Hadoop的一个数据仓库工具，将繁琐的MapReduce程序变成了简单方便的SQL语句实现，深受广大软件开发工程师喜爱。Hive同时也是进入互联网行业的大数据开发工程师必备技术之一。在本课程中，你将学习到，Hive架构原理、安装配置、hiveserver2、数据类型、数据定义、数据操作、查询、自定义UDF函数、窗口函数、压缩和存储、企业级调优、以及结合影音项目需求，把整个Hive的核心知识点贯穿起来。更新：课件升级、添加自定义UDTF函数、企业常用函数以及更多企业面试真题详细讲解
CDH6.3.2之Hive-3.1.3升级
weixin_38908403的博客
08-12 1182
参考：https://blog.youkuaiyun.com/qq_25868251/article/details/131047526。
hive1.x升级成2.x
qq_43008162的博客
09-17 904
升级前准备： hive2.x的安装包 官网下载 https://mirrors.tuna.tsinghua.edu.cn/apache/hive/ 我用的hive-2.3.6的连接 链接：https://pan.baidu.com/s/1bCRFM3XVwDGfwCMUGvCJGw 提取码：7zcd 安装配置 将安装包上传到linux系统自己想要安装目录中解压 tar -zxvf apache-h...
【Hive】升级元数据踩坑（mysql版本）
lsr40的博客
01-20 3645
hive的版本更新得蛮快的，但是一般我们定好一个版本之后，就不太会升级，但是有时候想要用到一些新版本的特性，我们就需要升级hive的版本 这就涉及到元数据迁移： 有两种做法： 1、写脚本 https://blog.youkuaiyun.com/maotai_2010/article/details/52185822 https://www.sohu.com/a/225997339_411876 ...
hive从0.12.0升级到1.2.1步骤详解及填坑
zlhblogs的博客
04-25 256
5.拷贝 之前版本的mysql connector jar包到 现在hive的lib 目录，将之前版本配置好的hive-site.xml，hive-env.xml与hive-log4j.properties放回现在hive的conf下。查看PART_COL_STATS创建表sql，错误原因是hive-schema-0.13.0.mysql.sql中的PARTITIONS表创建不成功导致PART_COL_STATS缺少外键，手动创建PARTITIONS表即可。2.备份MySQL的hive数据库。
HIVE 2.1.0 安装教程。（数据源mysql）
weixin_30352645的博客
11-16 212
前期工作 安装JDK 安装Hadoop 安装MySQL 安装Hive 下载Hive安装包 可以从 Apache 其中一个镜像站点中下载最新稳定版的 Hive, apache-hive-2.1.0-bin.tar.gz。 解压安装Hive 使用以下命令安装 Hive: sudo mv apache-hive-2.1.0-bin.tar.gz /opt cd /opt...
hive升级步骤详解（hive-0.7.1到hive-0.11.0）
lxpbs8851的专栏
09-04 7334
步骤如下： 1.关闭当前hive正在执行的进程，service hive-server等 2.备份mysql数据库hive库 mysqldump -uroot -phive hive > schem_hive-0.7.1.sql 这个用于升级失败之后的回滚。 3.修改环境变量，主要是HIVE_HOME 4.解压0.11.0的安装包， 进入目录： ${HIVE_HOME}/script
Hive0.13到Hive2.1跨版本升级全姿势
weixin_34391854的博客
06-27 293
转自：http://www.sohu.com/a/205768188_680863 Hive0.13到Hive2.1跨版本升级全姿势Hive是业界大数据平台使用最广泛的SQL引擎，提供了一层SQL抽象接口和一套元数据规范， 将SQL查询翻译为分布式的计算作业，支持MapReduce/Spark/Tez等多种计算引擎。 同时Hive定义的元数据标准已经成为了一种事实标准，业界流...
HIve升级到新版本过程
lxpbs8851的专栏
08-07 4508
1: 将原有的hive改名为hive_backup 2: 将原有hive中的conf文件夹全部复制到新版本hive中 3： 修改hive-conf.sh 文件 添加HADOOP_HOME  4： 相关第三方的包要转移到新的hive版本lib目录下 5： 首先要把之前的10000端口对应的线程kill掉， 然后 $HIVE_PORT=10000 bin/hive --servic
如何把hive版本更新为最新版本
06-10
1. 首先确定最新版本的 Hive 发布版本号。 2. 下载最新版本的 Hive，可以从 Hive 的官方网站或者 Apache 的官方网站上下载。 3. 解压下载的 Hive 压缩包到某个目录下。 4. 修改 Hive 的环境变量，将 Hive 的 bin ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值