阿里云ECS服务器下hive安装与配置

最新推荐文章于 2024-02-21 13:59:20 发布
转载 最新推荐文章于 2024-02-21 13:59:20 发布 · 1.7k 阅读 · 1
文章标签：

#Hive

本文详细记录了在CentOS7.2环境中部署Hive3.1.1过程中遇到的两个常见问题及其解决办法。首先，解决了因hive-site.xml中非法字符实体导致的初始化方案错误；其次，处理了由于系统临时目录配置不当引发的相对路径在绝对URI中的错误。通过调整配置文件和创建指定目录，最终成功部署Hive。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

参照：https://www.cnblogs.com/dxxblog/p/8193967.html

云服务器centos版本：CentOS 7.2

hive版本：apache-hive-3.1.1

遇到的错误：

1、执行：./schematool -dbType mysql -initSchema时报错

Exception in thread "main" [com.ctc.wstx.exc.WstxLazyException] com.ctc.wstx.exc.WstxParsingException: Illegal character entity: expansion character (code 0x8  at [row,col,system-id]: [3204,96,"file://hive/apache-hive-3.1.1-bin/conf/hive-site.xml"]

原因：

hive-site.xml  3204行有特殊字符，导致xml解析失败，删掉重新执行即可；

 

2、步骤1 之后执行hive指令报错：

Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D

解决：

http://www.mamicode.com/info-detail-1961966.html

1.查看hive-site.xml配置，会看到配置值含有"system:java.io.tmpdir"的配置项
2.根据实际安装目录在hive下新建文件夹iotmp，并且赋予使用用户的权限。
3.将含有"system:java.io.tmpdir"所有的配置项的值都修改为如上地址全路径 iotmp 

Hive在阿里巴巴数据仓库中的实践与应用
AI天才研究院
07-29 1934
Apache Hive 是 Hadoop 的一个子项目，它是一个基于 HQL（Hadoop Query Language）语言的查询引擎，可以将结构化的数据文件存储在HDFS上并提供分布式计算功能。Hive 有着良好的扩展性、稳定性、高效执行速度、完备的SQL支持等优点。Hive 适用于互联网行业、金融、广告、搜索引擎、在线推荐系统、日志分析等各种场景下的数据分析处理。在企业中，数据仓库建设始终是数据领域的一项重要工作，是对公司最核心、最关键的数据资产之一。
阿里云ECS服务器下安装MySQL
enoughgood的博客
09-06 547
1. 写在前面的话   从事大数据开发已经有几年了,最近工作遇到瓶颈,时下火热的技术用的不多,想再提升提升.经过对方对比,详细了解了拉勾的课程体系,觉得是比较适合自己的,所以最后选择了拉勾教育大数据高薪训练营.现对学习内容以及结合自身的工作经验做一些总结,也算是开启自己的博客之路. 2. 安装MySQL的前置条件 2.1 安装环境说明   这里安装选用的Linux系统的版本为CentOS7.5,MySQL的版本为MySQL5.7.26,在阿里云ECS服务器上进行安装. 2.2 删除CentOS7.x自带的M
HIVE安装及详解
10-14
HIVE安装及详解，及测试，该文档版本是1.2+的。。。。。
阿里云ECS7安装搭建：hive-2.1.1客户端
alan_liuyue的博客
05-17 1608
简介 hive在hadoop大数据生态里面，主要用于hdfs上的数据的统计查询，与hbase形成互补关系，但查询时间会相对较慢； 搭建hive客户端前提环境： 已经安装hadoop集群，可参考上一篇博客：hadoop集群安装搭建； 已经有安装好的mysql数据库(可以是本机也可以是其他服务器)，同时下载mysql驱动：mysql-connector-java-6.0.5.jar； 下载hi...
阿里云ECS服务器部署HADOOP集群（四）：Hive本地模式的安装
gman344的博客
12-07 333
本篇将在阿里云ECS服务器部署HADOOP集群（一）：Hadoop完全分布式集群环境搭建的基础上搭建。 本地模式需要采用MySQL数据库存储数据。 1 环境介绍 一台阿里云ECS服务器：master 操作系统：CentOS7.3 Hadoop：hadoop-2.7.3.tar.gz Java:jdk-8u77-linux-x64.tar.gz Hive：apache-hive-2.3.6-bin.tar.gz Mysql: Mysql 5.7 MySQL Connector-J：mysql...
hive搭建
ct1104的博客
03-16 3248
step: 1.准备好hadoop环境 2.准备MySQL环境 （因为hive的元数据数据库是derby 不能多用户操作(在不同目录底下启动hive derby将在该目录底下创建数据库文件但不同目录数据不互通) 所以切换MySQL作为元数据数据库 ） 3.创建源数据库metastore 4.安装hive并配置hive的安装环境 （解决架包冲突mv $HIVE_HOME/lib/log4j-slf4j-impl-2.10.0.jar $HIVE_HOME/lib/log4j-slf4j-impl-2.10..
在Linux操作系统的ECS实例上安装Hive
最新发布
qq_59812342的博客
02-21 1206
这步真的遇到很多问题，就到处看帖子把和我报错信息一样的都拿来试试…实在不行就重装咯毕竟不懂什么底层逻辑…下下一步初始化Hive元数据库时，遇到报错前一天两三小时没解决，问题定位在mysql，次日打算重装。先测试下，后面改完hive与mysql的相关配置后再-dbType mysql。ps：连接失败有可能因为ECS安全组没加10000。作用：开启用户模拟访问Hadoop集群数据。hiveserver2连接的ip。配置访问hadoop的权限。
记录阿里云服务器搭建伪分布Hadoop以及hive远程连接
jiam6的博客
03-28 1225
小机器搭建Hadoop伪分布式
【服务器】（五）阿里云ECS上搭建Hadoop集群环境——设置(分布式)Mysql、Hive、Sqoop与Hue安装
系'辞的博客
03-30 741
说明： 在本分布式中，slave1、slave2主要作为数据存储。而，hive是用于检索的工具，故仅在Master服务器端安装hive与mysql。 安装mysql cd /home/test/install/ #ubantu系统对应指令 sudo apt-get install mysql-server-5.7 #安装MySQL的客户端和服务端 sudo apt install libmysqlclient-dev #安装MySQL需要的依赖 ps -e | grep mysql #查看
阿里云上安装Hadoop+Hive
m0_67818995的博客
07-03 954
为了方便随时学习和不愿意在自己电脑上安装各种虚拟机，于是购买了一个低配的阿里云linux服务器，配置1cpu+2G内存，ubuntu系统。安装步骤：1.安装hadoop 1.1 申请阿里云ecs服务器，默认已经申请 1.2 通过终端工具远程连接阿里云Ubuntu服务器，经比较ZOC这个工具不仅小巧，并且功能丰富，可以建立站点等,大家下载免费版的就行，如下是地址Telnet client for Windows and macOS - Download our Telnet Client ZO
Hive安装与配置
10-30
Hive安装与配置
整个阿里大数据工程师都在用的一份Hive实战文档
大数据Hive教程
01-02 423
前言 本书是一本Apache Hive的编程指南，旨在介绍如何使用Hive的SQL方法- -HiveQL来汇总、查询和分析存储在Hadoop分布式文件系统上的大数据集合。全书通过大量的实例，首先介绍如何在用户环境下安装和配置Hive,并对Hadoop和MapReduce进行详尽阐述，最终演示Hive如何在Hadoop生态系统进行工作。 由于文档内容过多，只截取了目录部分，每个知识点都有更细化...
Hive的安装与配置
热门推荐
Smileyan's blog
10-18 1万+
一、Hive 简单介绍 1. 什么是Hive Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。 由Facebook 开源，最初用于解决海量结构化的日志数据统计问题 构建在Hadoop之上的数据仓库 Hive 定义了一种类SQL查询语言：HQL 通常用于进行离线数据处理 (采用MapReduce) 底层支持多种不同的执行引擎 支持多...
Hive报错
铁血军的小博客
05-25 2975
主要是因为粗心导致的 报错信息 Exception in thread “main” java.lang.RuntimeException: com.ctc.wstx.exc.WstxUnexpectedCharException: Unexpected character ‘l’ (code 108) in prolog; expected ‘<’ at [row,col,system-id]: [1,4,“file:/home/export/servers/apache-hive-3.1.2-bi
Hive 3.1.2Linux CentOs 安装，踩坑 Dbeaver 连接Hive
MaggieCN0622的博客
11-17 1510
安装hive 3.1.2版本 前提：hadoop 3.2.2 jdk 1.8.0 mysql: 5.7 下载 wget https://mirrors.tuna.tsinghua.edu.cn/apache/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz --no-check-certificate 解压 tar -xzvf apache-hive-3.1.2-bin.tar.gz -C ../app 软连接 ln -s apache-hive-3.1.2-bi
Exception in thread "main" java.lang.RuntimeException: com.ctc.wstx.exc.WstxParsingException: Illega
JHC_binge的博客
11-30 1万+
  把3230行的注释掉即可：
com.ctc.wstx.exc.WstxEOFException错误
janluch的专栏
10-20 3631
com.ctc.wstx.exc.WstxEOFException错误 2007-10-15 14:30         写的一个RCP程序的时候，由于需要，把程移到另一台机器上，在连接WebServicce时报错。错误如下： org.apache.axis2.AxisFault: com.ctc.wstx.exc.WstxEOFException: Unexpected EOF in ...
【Hive】 解决 com.ctc.wstx.exc.WstxParsingException: String ‘--‘ not allowed in comment (missing ‘」‘?)
Joker的博客
07-13 4658
这是以前安装配置 Hive 的笔记。 [admin@node21 conf]$ schematool -dbType mysql -initSchema Exception in thread "main" java.lang.RuntimeException: com.ctc.wstx.exc.WstxParsingException: String '--' not allowed in comment (missing '>'?) at [row,col,system-id]: [20,5,"
阿里云服务器安装hive
08-17
为了在阿里云服务器上安装Hive，您可以按照以下步骤进行操作： 1. 首先，通过终端工具远程连接到阿里云Ubuntu服务器。您可以使用ZOC这个工具，它不仅小巧，而且功能丰富。您可以从免费版本的官方网站下载ZOC。 2. 确保您的阿里云服务器已经安装了Ubuntu系统，并且配置了至少1个CPU和2GB内存。如果您还没有安装Ubuntu系统，您可以按照阿里云提供的文档和教程进行安装。 3. 在您的阿里云服务器上安装Hive之前，您需要确保已经安装了Java Development Kit（JDK）。您可以使用以下命令安装OpenJDK： ``` sudo apt-get update sudo apt-get install openjdk-8-jdk ``` 4. 安装完JDK后，您可以开始安装Hive了。您可以按照参考链接https://blog.csdn.net/u010886217/article/details/83926160中提供的步骤来启动Hive Server2服务。确保按照该链接中的步骤进行操作，并进行测试以确保安装成功。 5. 一旦Hive安装成功，您就可以在阿里云服务器上使用Hive进行数据分析和查询了。 请注意，以上步骤仅提供了一个大致的指引，具体的安装步骤可能会因您的环境和需求而有所不同。建议您查阅官方文档和相关教程以获取详细的安装指导。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [阿里云上安装Hadoop+Hive](https://blog.csdn.net/m0_67818995/article/details/125583950)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *3* [阿里云搭建大数据平台（6）：Hive和mysql安装和配置](https://blog.csdn.net/u010886217/article/details/83690267)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值