从sqoop到hive没报错但是找不到表

最新推荐文章于 2022-09-08 17:59:54 发布

COIN NO COIN

最新推荐文章于 2022-09-08 17:59:54 发布

阅读量1.1k

点赞数

分类专栏： error sqoop hive

本文链接：https://blog.youkuaiyun.com/qq_43264006/article/details/101622065

版权

hive 同时被 3 个专栏收录

10 篇文章

订阅专栏

error

4 篇文章

订阅专栏

sqoop

1 篇文章

订阅专栏

本文探讨了使用SQOOP导入数据至HIVE过程中遇到的问题，具体表现为执行命令后HIVE中未出现数据。作者通过排查发现，问题源于SQOOP配置目录下的hive-site.xml文件未同步更新。文章提供了正确的配置示例，包括hive.metastore.warehouse.dir、hive.metastore.uris等关键属性，强调了在客户端执行SQOOP操作时正确配置hive-site.xml的重要性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

导入语句
sqoop import
–connect jdbc:mysql://zjy:3306/company
–username root
–password zjy123zjy --table staff1
–split-by id
–hive-import
–create-hive-table
–hive-table staff_hive;

然后出现下面的场景

在这里插入图片描述
没报错以为成功了就去hive里面去看发现什么都没有
怎么回事儿

经过一番探索发现
因为我在hive的客户端执行可能是因为sqoop/conf下的
hive-site-xml配置有错误导致的
看了看发现果然出错之前复制了hive/conf/hive-site-xml 到sqoop/conf/下
但之后对hive中的hive-site-xml做了修改 sqoop/conf下的没更新
于是我就更新这个文件果然成功了
在这里插入图片描述

总结

1 就在hive的服务端执行就不会出现这个问题
2 在客户端执行要配置好hive-site.xml 并复制到sqoop/conf/下

<configuration>
                   <property>
                        <name>hive.metastore.warehouse.dir</name>
                        <value>/user/hive/warehouse</value>
                   </property>
                    <property>
                         <name>hive.metastore.uris</name>
                         <value>thrift://zjy2:9083</value>
                   </property>


                   <property>
                      <name>hive.exec.mode.local.auto</name>
                          <value>true</value>
                  </property>