20131016hive配置问题hive.metastore.warehouse.dir

最新推荐文章于 2023-03-12 15:31:43 发布
原创 最新推荐文章于 2023-03-12 15:31:43 发布 · 4.6k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文解决了一个特定的Hive SQL错误（错误代码10028），该错误涉及非法路径问题。通过调整配置文件hive-site.xml中的hive.metastore.warehouse.dir参数，将路径统一到正确的HDFS地址，从而解决了数据移动过程中遇到的问题。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

错误：  java.sql.SQLException: Query returned non-zero code: 10028, cause: FAILED: SemanticException [Error 10028]: Line 1:17 Path is not legal ''hdfs://192.168.21.63:9000/scan/scan_2013-09-03'': Move from: hdfs://192.168.21.63:9000/scan/scan_2013-09-03 to: hdfs://master:9000/user/hive/warehouse/scan_2013_09_03 is not valid. Please check that values for params "default.fs.name" and "hive.metastore.warehouse.dir" do not conflict.



修改hive-site.xml文件：
hive.metastore.warehouse.dir修改为hefs://192.168.21.63:9000/user/hive/warehouse
Hadoop环境搭配（hive环境配置）
xcfku的博客
12-18 2318
1、下载安装包：apache-hive-3.1.2-bin.tar.gz 上传至linux系统 /opt/software/ 路径 2、解压软件 cd /opt/software/ tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/ 3、修改系统环境变量 vi /etc/profile 添加内容： export HIVE_HOME=/opt/module/apache-hive-3.1.2-bin export PATH=$PAT
Hive的Metastore三种配置方式
日常分享数据分析开发、编程语言内容
02-28 5408
Hive的Metastore三种配置方式
hive-site.xml修改之后不生效与一些beeline，hiveserver2的报错
大数据机器学习
03-12 864
这个是说关于hive.metastore.ds.retry.*这些配置已经不起作用，使用hive.hmshandler.retry.*来配置，这也是版本迭代更新的问题，不过警告在测试环境中，一般来说是没什么太大关系的，但是真实开发还是要好好关注下是什么情况。解释：如果你是用默认的配置文件，hive会连接自带的derby数据库，会在hive的根目录下生成derby.log这个日志文件，并且当启动两个bin/hive的时候，就会报错（如果是mysql就不会）它总是加载默认的配置文件，很烦。
Hadoop之Hive(2)--配置Hive Metastore
weixin_30920513的博客
10-23 366
Hive metastore服务以关系性数据库的方式存储Hive tables和partitions的metadata,并且提供给客户端访问这些数据的metastore service的API。下面介绍一下Metastore部署的三种模式 注意: 这里讨论的HiveServer 指的是HiveServer1 或者 HiveServer2。 嵌入式模式 ...
Hive安装（二）之表不见了
weixin_30443075的博客
11-29 259
　　重启一下电脑，发现表不见了，原来我用的derby存储hive的meta，网上找了一下资料，说是要用mysql， 于是安装mysql 1 sudo apt-get install mysql-server 首先用root登陆给root用户赋予权限 1 $mysql -u root -p hive 2 mysql> GRANT ALL PRIVILEGES ON *.* ...
Hadoop之Hive的安装与配置
WILL的博客
05-19 5557
环境信息： 虚拟机数量：3台 操作系统：Ubuntu 14.04 实验环境及版本： Hadoop：Hadoop 2.2.0 Java：java version "1.7.0_51" Hive：apache-hive-1.2.1 MySQL：mysql Ver 14.14 Distrib 5.5.44(x86_64) 安装Hive之前首先要确保hadoop集群搭建成功 （1）Hive...
hive.metastore.warehouse.dir这个地址是配置什么的？
最新发布
03-22
好的，我现在需要回答用户关于hive.metastore.warehouse.dir配置项的问题。首先，我得回忆一下Hive的相关知识，确保自己对这个参数的理解正确。 Hive的metastore负责存储元数据，而warehouse.dir应该和数据的存储...
hive.metastore.warehouse.dir
03-16
hive.metastore.warehouse.dir是Hive元数据存储的根目录，用于存储Hive表的数据。在Hive中创建表时，可以指定表的存储位置，如果未指定，则默认存储在hive.metastore.warehouse.dir下。该属性可以在Hive配置文件中...
Hive配置和基本操作.pdf
10-30
配置了包括 `hive.exec.local.scratchdir`、`hive.exec.scratchdir`、`hive.server2.logging.operation.log.location`、`hive.downloaded.resources.dir`、`hive.querylog.location`、`hive.metastore.warehouse.dir...
【hive配置metastore远程模式】
耀哥的博客
12-24 2738
hive配置metastore远程模式
Hive配置参数说明和配置注意事项
PeixinYe的博客
06-06 1185
hive.metastore.warehouse.dir该参数指定了 Hive 的数据存储目录，默认位置在 HDFS 上面的 /user/hive/warehouse 路径下。hive.exec.scratchdir该参数指定了 Hive 的数据临时文件目录，默认位置为 HDFS 上面的 /tmp/hive 路径下。更多配置参数说明：https://my.oschina.net/HIJAY/blo...
hive metastore解析
zeng6325998的博客
03-17 1211
背景 以上所有内容，均搬自官方文档,还有一部分是自己在实际经验中的总结。官方文档相关已经非常详细，也希望大家能养成看官方文档的好习惯。 说明 hive metastore 是什么呢？ 它是一个服务端，简称server。 有什么作用呢？ 作用是建立起和hive客户端的连接，当客户端来请求，server去远程metastore数据库查询信息返回 hive metastore的模式 hive ...
sqoop 导入数据到hive报错数据库不存在，但是我在hive已经创建了数据库
总分全班第一
05-26 2147
1，报错日志如下 19/05/25 22:18:43 INFO manager.SqlManager: Executing SQL statement: SELECT t.* FROM `back` AS t LIMIT 1 19/05/25 22:18:43 INFO hive.HiveImport: Loading uploaded data into Hive 19/05/25 22:18:...
Hive常见属性配置
Movle
05-10 952
1.Hive数据仓库位置配置 (1)Default数据仓库的最原始位置是在hdfs上的：/user/hive/warehouse路径下 (2)在仓库目录下，没有对默认的数据库default创建文件夹。如果某张表属于default数据库，直接在数据仓库目录下创建一个文件夹。 (3)修改default数据仓库原始位置(将hive-default.xml.template如下配置信息拷贝到hive-site.xml文件中) <property> <name>hive.metastore.w
Hive初始化数据库异常处理
little_sloth的博客
06-30 1177
初始化数据库时报如下错误 ：org.apache.hadoop.hive.metastore.HiveMetaException: Failed to get schema version. 2020-06-30 08:25:09,985 WARN [main] util.HeapMemorySizeUtil: hbase.regionserver.global.memstore.upperLimit is deprecated by hbase.regionserver.global.memstore.
初始化hive报错总结,翻遍网络,终于摸索出来万能解决方法
热门推荐
zhi443的博客
06-08 1万+
root用户下 service mysqld start 初始化：$HIVE_HOME/bin/schematool -dbType derby -initSchema 这是嵌入式启动hive 前提条件在cd ～/bigdata/apache-hive-2.3.0-bin/conf下有个 hive-site.xml 记得初始化derby的 hive-site.xml 里面是 如果里面全空没东西，报以下错误： [hadoop-twq@master apache-hive-2.3.3-bin]$ $HIV
Hive 中数据仓库默认位置配置及库表关系
qq_39954916的博客
03-30 8997
1、原始位置的默认配置 hive中的Default（默认）数据仓库的最原始位置是在hdfs上的 /user/hive/warehouse（以下默认Hive的HDFS根目录为/user/hive）路径下，这个原始位置是hive-default.xml.template文件默认配置的， 2、库表关系 1）默认情况下： 在hdfs目录下，没有对默认的数据库default创建文件夹。如果某张表属于...
hive安装配置及遇到的问题解决
Chunhong Song的专栏
05-16 1万+
１．下载hive安装包apache-hive-1.2.1-bin.tar.gz 2.解压安装包，并移动到要安装的路径下 sudo tar -zxvf apache-hive-1.2.1-bin.tar.gz sudo mv -r hive1.2.1 /usr/local/ ３.配置hive环境变量  vi /etc/profile 添加环境变量值   export HIVE_HOM
修改hive的数据仓库位置
张俊杰 的博客
09-13 2168
Default数据仓库的最原始位置是在hdfs上的：/user/hive/warehouse路径下,如果你不想用这个默认的路径是可以进行修改的 修改方式 在hive-site.xml文件里面去修改 在conf文件夹下面去编辑 [root@zjj101 conf]# pwd /root/soft/hive-1.2.1/conf <--! 配置hive的根目录,直接放到hdfs的hive目录下面 --> <property> <name>hive.metasto
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值