Kylin中看不到hive库表但是hive命令行可以看到

最新推荐文章于 2025-03-28 16:07:46 发布
原创 最新推荐文章于 2025-03-28 16:07:46 发布 · 2.6k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#kylin #hive #大数据

本文介绍了解决Kylin环境中无法找到Hive数据库及表的问题。通过检查并配置kylin.properties中的kylin.env.hadoop-conf-dir项指向正确的Hadoop配置目录，确保包含hive-site.xml等必要配置文件，从而实现正常的数据源加载。

hive环境迁移后发现在Kylin中load data source的时候找不到hive中的数据库和表了，但是执行hive命令查询库表及其数据都没有问题。

解决方法如下：

kylin.properties中的配置项：

kylin.env.hadoop-conf-dir=/etc/hadoop/conf

该配置表示在/etc/hadoop/conf目录下要存在所有大数据平台的配置文件，这里检查hive-site.xml配置文件是否存在即配置正确。

更改配置后重启kylin即可。


Kylin报错 FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException...
杨鑫newlife的专栏
11-26 898
Kylin接入Hive数据时，报错如下： FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaS...
Hive&Kylin数据源总结
马小胖测试历险记
11-21 1942
Hive&Kylin 一、Hive Hive就是对hdfs的数据进行mapreduce操作。hive就是一个数据仓库，运行时元数据信息存储在关系型数据库。（HSQL） 1.Hive与数据库的异同： 查询语言。由于 SQL 被广泛的应用在数据仓库中，因此专门针对Hive的特性设计了类SQL的查询语言HQL。熟悉SQL开发的开发者可以很方便的使用Hive进行开发。 ...
Kylin报找不到hive-site.xml的问题
一个喜欢编程的人。
06-04 3275
在使用Kylin的过程中，由于在配置文件kylin.properties中，默认的配置项： kylin.env.hadoop-conf-dir=/etc/hadoop/conf 我们使用的CDH的环境，在/etc/hadoop/conf中只有yarn、hdfs等相关的配置文件，没有hive-site.xml 的文件，所以在Kylin中读取hive数据时，会报如下的错误： 后来发现，hi...
Kylin构建Cube过程详解
深蓝旭的博客
12-15 1419
1 前言 在使用Kylin的时候，最重要的一步就是创建cube的模型定义，即指定度量和维度以及一些附加信息，然后对cube进行build，当然我们也可以根据原始表中的某一个string字段（这个字段的格式必须是日期格式，表示日期的含义）设定分区字段，这样一个cube就可以进行多次build，每一次的build会生成一个segment，每一个segment对应着一个时间区间的cube，这些segment的时间区间是连续并且不重合的，对于拥有多个segment的cube可以执行merge，相当于将一个...
Hive的安装配置及原理 完美解决解压hive缺少hive-site.xml文件，和安全模式无法启动hive等问题
热门推荐
iamboluke的博客
12-11 1万+
Hive原理 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。 Hvie是建立在Hadoop上的数据仓库基础架构。它提供了一系列的工...
Hive仓库的表要同步到Kylin中
11-16
### Hive仓库的表同步到Kylin中的维度设计与Cube构建详解 #### 一、引言 随着大数据技术的发展，企业对于海量数据的处理需求日益增长。Apache Hive 和 Apache Kylin 是两个广泛应用于大数据领域的工具。其中，Hive...
数据仓库实战：Hive、HBase、Kylin、ClickHouse
05-07
数据仓库实战：Hive、HBase、Kylin、ClickHouse 包含 01~大数据体系 02~数据集成 03~数仓建模 04~数据可视化 等等 在学习与实践软件分布式架构过程中的，笔记与代码的仓库；主要包含分布式计算、分布式系统、数据...
在 Kylin 中，如何导入 Hive 表中的数据？
weixin_45422672的博客
02-18 456
在 Apache Kylin 中，导入 Hive 表中的数据是一个常见的操作。确保你已经在 Hive 中创建了表，并且表中有数据。在 Kylin 的 Web 界面中，创建一个新的项目或选择一个现有的项目。在项目中，创建一个新的数据源，选择 Hive 作为数据源类型。在数据源配置中，选择要导入的 Hive 表。在 Kylin 中创建一个数据模型，选择刚刚配置的 Hive 表作为数据源。定义模型的维度和度量。基于创建的数据模型，构建 Cube。
kylin的datasource配置
weixin_37042673的博客
12-18 728
kylin的datasource配置 文章目录kylin的datasource配置parquet(decimal)kylin的datasourcekylin 配置获取kylin datasourceconnection 的代理对象生成构造方法invoke方法wait方法notify方法 parquet(decimal) spark写parquet数据，decimal类型在hive中无法识别问题解决 StudentExamScoreStatSpark.java //处理个别数据类型(eg. decimal
hive mysql 权限,hive权限问题，
weixin_35896668的博客
03-19 398
hive权限问题，1.给某个用户授权grantselectondatabaseffcs_chenytouserffcs_cheny;2.ddlStatement:(createDatabaseStatement|switchDatabaseStatement|dropDatabaseStatement|createTableStatement|dropTable...
使用kylin时遇到的问题
Jatham_C的博客
02-15 720
fail to locate kylin_job_conf.xml 解决方法：重启 {KYLIN_HOME}/bin/kylin.sh stop {KYLIN_HOME}/bin/kylin.sh start 找不到 kylin_hive_conf.xml文件 解决方法：照着log的路径复制conf/kylin_hive_conf.xml (后续可能会出现缺少sql语句支持，建议将conf中的文件...
hadoop环境
u011878487的专栏
04-10 346
收银台jar 10.112.178.108 22 hadoop hadoop国内镜像http://mirror.bit.edu.cn/apache/hadoop/common/阿里 较快https://mirrors.aliyun.com/apacheHive2.1.1的源码包需要JDK1.8下载地址:http://www.oracle.com/technetwork/java/javase/do...
kylin问题总结
简单而有效
06-30 8679
点击加载hive表出现如下异常： java.lang.NoClassDefFoundError: org/apache/hadoop/hive/cli/CliSessionState java.lang.NoClassDefFoundError: org/apache/hadoop/hive/ql/session/SessionState 解决：将hive lib文件夹下的lib拷贝
解决 Apache Kylin 加载 Hive 表失败的问题：深入分析与解决方案
最新发布
程序猿熊躍暉的专栏
03-28 442
近期，在对 Apache Kylin 进行配置以集成 Hive 数据源时，遇到了一个令人困惑的问题：Kylin 无法加载 Hive 表及其相关的配置信息，并且总是返回“Fail to take action”错误消息。奇怪的是，后端日志中并没有任何明显的错误记录，这使得问题的排查变得更加复杂。
Kylin入门实战(数据源添加 + Model定义 + Cube构建 + 结果查询 + 查询限制)
Bulut0907
02-01 1496
新建model第一步：定义model信息第二步：定义model的表如果维度表太大，比如大于300MB，则不要对该维度表进行snapshot。导致不能直接查询该维度表，和不能从该维度表定义Cube的衍生维度字段两个表的join字段类型必须一致再点击Next，进入下一步第三步：选择model的维度字段第四步：选择model的度量字段第五步：model的分区和条件过滤设置由于我们的Hive测试表不是分区表，所以不用定义事实表的分区字段信息，进行的是全量数据构建。
虚拟机连接mysql出现的问题
m0_70993224的博客
11-02 3149
1:下载mysql出现无法解析的问题 在端口号和网关配置没有出错的前提下，进去etc目录下通过命令vim resolv.conf进去并添加以下内容。 可以通过:ping 8.8.8.8测试是否成功，在输入时前面一定不能有空格。 2.在进入mysql时输入密码出现not found 这是因为初始密码中存在特殊符号导致无法识别，只需在特殊符号前面加上\即可，如下图 在！前面加上\ 在确认密码时出现错误1045 使用以下命令即可。然后在确认密码中输入自己的查看的初始密码，
初始化Hive元数据库 bash: schematool: 未找到命令的原因
weixin_49067219的博客
08-16 9483
(1)是否将MySQL的JDBC驱动拷贝到Hive的lib目录下： sudo cp /opt/software/mysql-connector-java-5.1.37.jar $HIVE_HOME/lib (2)是否在$HIVE_HOME/conf目录下新建hive-site.xml文件，文件的内容可以百度下 （3）Hive环境变量是否配置无误，最重要的一点是配置好环境变量后一定要先source下 ...
深度解析：Hive、HBase、Kylin、ClickHouse在数据仓库的应用
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的SQL查询功能，它可以将SQL语句转换为MapReduce任务进行运行。Hive适用于进行数据挖掘和数据分析，非常适合于数据仓库...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值