【大数据Hive】Hive 内部表与外部表使用详解

最新推荐文章于 2025-08-05 14:59:22 发布
置顶 最新推荐文章于 2025-08-05 14:59:22 发布
阅读量6.3k 收藏 67
点赞数 67
CC 4.0 BY-SA版权
分类专栏： 大数据 hive入门到精通 文章标签： hive内部表与外部表 hive外部表 hve内部表 hive外部表总结 hive外部表使用
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/congge_study/article/details/128697570
本文详细介绍了Hive的内部表和外部表，包括它们的定义、区别、操作演示以及如何选择使用。内部表由Hive完全管理，删除时会删除元数据和数据。外部表仅删除元数据，数据文件保持不变。创建外部表需使用`EXTERNAL`关键字，可通过`LOCATION`指定数据路径。在选择使用时，内部表适用于完全管理，外部表则用于保护原始数据。

目录

一、hive 内部表简介

1.1 查看内部表信息

二、hive 外部表简介

三、内部表与外部表对比

四、内部表与外部表操作演示

4.1 内部表操作

4.1.1 数据准备

4.1.2 建表sql

4.2 外部表操作

4.2.1 建表sql

4.2.2 上传数据文件到 /stu目录

4.2.3 内部表删除

4.2.4 外部表删除

4.3 如何选择内、外部表

五、内部表、外部表与location的关系

5.1 location关键字不补充说明

5.2 操作演示

5.2.1 创建外部表，不指定location

5.2.2 创建内部表，指定location

一、hive 内部表简介

内部表（Internal table）也称为被Hive拥有和管理的托管表（Managed table）

默认情况下创建的表就是内部表，Hive拥有该表的结构和文件。换句话说，Hive完全管理表（元数据和数据）的生命周期，类似于RDBMS中的表。当删除内部表时，它会删除数据以及表的元数据。

还记得上一篇中关于hive建表的完整语法树吗，在建表sql中第一行提供了可选参数 EXTERNAL

 CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.]table_name

...

1.1 查看内部表信息

可以使用DESCRIBE FORMATTED tablename,来获取表的元数据描述信息，从中可以看出表的类型；

了解本专栏 订阅专栏 解锁全文 超级会员免费看
大数据领域 Hive 与 Spark 的集成应用
AI天才研究院
05-10 1292
随着企业数据量呈指数级增长，传统单一计算引擎已难以满足复杂的数据处理需求。Hive 作为基于 Hadoop 的分布式数据仓库，擅长离线批量数据处理和 SQL 语义支持；Spark 则以内存计算为核心，提供批处理、流处理、机器学习等统一计算框架。本文旨在解析两者集成的技术原理、实施路径及应用价值，覆盖从基础架构设计到性能优化的全流程，帮助读者掌握高效的数据处理解决方案。背景介绍：明确技术定位与读者对象核心概念与联系：剖析 Hive 与 Spark 的架构特征及集成逻辑核心集成原理与操作步骤。
大数据技术之Hive
小菜菜的博客
10-27 1401
声明：原文来自于《尚硅谷》免费学习资料 文章仅供学习，如需详细了解请光顾《尚硅谷》官网
hive中的内部表和外部表
qq_51666324的博客
10-23 3128
未被external修饰的是内部表（managed table），被external修饰的为外部表（external table）。 区别 1. 内部表数据由Hive自身管理，外部表数据由HDFS管理； 2.内部表数据存储的位置是hive.metastore.warehouse.dir（默认：/user/hive/warehouse），外部表数据的存储位置由自己制定（如果没有LOCATION，Hive将在HDFS的/user/hive/warehouse文件夹下以外...
Hive【内部表、外部表、临时表、分区表、分桶表】【总结】
xiayuhaisong的博客
02-19 3779
分区提供了一个隔离数据和优化查询的可行性方案，但是并非所有的数据集都可以形成合理的分区，分区的数量也不是越多越好，过多的分区条件可能导致很多分区上没有数据。分桶表会将指定的列的值进行哈希散列，并对bucket（桶数量）取余，然后存储到对应的bucket中。分区表和分桶表的本质都是将数据按照不同粒度进行拆分，从而使得在查询的时候不必扫描全表，只需要扫描对应的分区或分桶，从而提升查询的效率。如果查询的where子句中包含分区条件，则直接从该分区查找，而不是扫描整个目录，合理的分区可以极大的提高查询速度和性能。
Hive的内部表、外部表、分区表和分桶表
cc876的博客
09-28 1816
hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低，可以通过类似SQL语句实现快速MapReduce统计，使MapReduce变得更加简单，而不必开发专门的MapReduce应用程序。hive十分适合对数据仓库进行统计分析。 ...
Hive内部表与外部表
weixin_71667809的博客
03-29 1376
外部表被drop后，表的metadata会被删除，但是data不会被删除。（1）外部表：因其指删除表时不会删除HDFS上的数据，安全性相对较高，且指定目录的特性，适合数据需要共享或者数据的处理需要 hive和其他工具一起处理的场景。内部表(managed table): 未被external修饰的表，也叫管理表。外部表：删除表会删除表的元数据(metadata)，但不会删除表数据（data）。内部表：删除表会删除表的元数据(metadata)和表数据（data）。
Hive内部表及外部表
weixin_44246850的博客
01-06 1万+
1、内部表 内部表，也叫托管表，是Hive在创建表时的默认表。 特点：在内部表被删除后，表的元数据和表数据都从HDFS中完全删除 ①：首先创建一个student内部表 hive> create table if not exists student( > id string, > name string > ) > row format delimited > fields terminated by '\t'; ②查看
精选资源
大数据面试 Hive 八股文
02-20
3. **Hive内部表和外部表的区别** - **内部表**：数据与元数据一起管理，删除时会同时删除数据和元数据。 - **外部表**：仅管理元数据，数据存储在用户指定的位置，删除时仅删除元数据。 4. **Hive建表语句** - ...
大数据领域 Hive 数据压缩与存储优化
最新发布
大数据洞察的博客
08-05 799
在数据量呈指数级增长的今天，Hive作为大数据生态系统中的数据仓库基石，其存储效率和查询性能直接影响企业的运营成本和决策速度。本文将深入探讨Hive数据压缩与存储优化的核心技术，从基础原理到高级实践，为您揭示如何在不牺牲查询性能的前提下，显著降低存储成本并提升处理效率。我们将系统比较各类压缩算法的优劣，详解ORC与Parquet等列式存储格式的内部机制，并通过真实案例展示如何构建高效的Hive数据存储架构。
Hive 内部表与外部表
qq_63735758的博客
03-26 1139
内部表(managed table): 未被external修饰的表，也叫管理表。外部表(external table):被external修饰的表。
hive查看是外部表还是内部表
妙妙的博客
11-08 1万+
我知道的有两个方法： 第一种方法是 进入hive，执行 describe extended tablename; 查看表的详细信息。 如果是外部表，在详细信息的最后一行，会输出 tableType:EXTERNAL_TABLE 如果是内部表/管理表，则会显示tableType：MANAGD_TABLE如果是外部表，则会显示tableType:EXTERNAL_TABLE第二种方法是 在hi
Hive内部表和外部表
TRX的博客
01-19 3671
Hive表分为两类，即内部表和外部表。 内部表（managed table） 所谓内部表（managed table）即Hive管理的表，Hive内部表的管理既包含逻辑以及语法上的，也包含实际物理意义上的，即创建Hive内部表时，数据将真实存在于表所在的目录内，删除内部表时，物理数据和文件也一并删除。 外部表（external table） 外部表（external table）则不然，其管理仅仅是在逻辑和语法意义上的，即新建表仅仅是指向一个外部目录而已。同样，删除时也并不物理删除外部目录，而仅仅是
hive的内部表和外部表
qq_45450889的博客
04-06 688
一、 内部表（管理表） hive全程管理 表和数据 的生命周期：当删除一个管理表时，hive也会删除这个表中的数据，管理表的数据，元数据以及存储位置 创建表时不特别指定就是内部表 hive默认情况会将表的数据存储在/user/hive/warehouse的子目录下 二、 外部表 为啥要用：不适合和其他工具共享数据 hive之管理数据，不管理元数据：删除表的时候不会删除表的数据，描述表的元数据信息会被删掉 创建外部表：create external table 表名 (id int,name strin
Hive内部表、外部表
热门推荐
在路上的学习者
04-06 1万+
hive内部表、外部表区别自不用说，可实际用说还是要小心
HIVE内部表和外部表
07-19 898
内部表又叫做管理表(Managed/InternalTable)，创建表时不做任何指定，默认创建的就是内部表。想要创建外部表(ExternalTable)，则需要使用External进行修饰。
【Hive】内部表和外部表
Asher117的博客
01-12 344
内部表：Hive默认表，创建一个内部表，那么表将在HDFS中的特定位置创建。删除一个内部表，这个表的表数据和元数据都将从HDFS中删除。 外部表：创建表时使用EXTERNAL关键字，删除外部表时，HDFS文件中的数据将保留。 ...
hive内部表与外部表
yanzhelee
07-16 1477
hive内部表与外部表hive的内部表与外部表之间的区别 区别 创建表过程 删除表过程 内部表 会将数据移动到数据仓库指向的路径 元数据和实际数据一起删除 外部表 仅记录数据所在的路径，不会对数据的位置坐任何改变 只删除元数据，不删除实际数据，相对比较安全。 传统数据库和hive之间的区别传统数据库对表的验证是schema on write（写时模式），而hive在
优化查询效率：HIVE自建落地表与SQL操作详解
与内部表不同的是，外部表的数据存储位置不受Hive控制，删除表时数据依然存在。 此外，Hive还支持创建分区表，以进一步优化查询性能。分区是将大表按照特定列（通常是时间、地区等）划分成小块，每个分区相当于一...
评论 116
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

逆风飞翔的小叔

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值