hive
自由地带
踏踏实实的程序员
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
hive总结01_简述与安装
目录 Hive简述 架构 与传统数据库比较 安装 地址 安装部署 常见属性配置 MySql安装 Hive元数据配置到MySql HiveJDBC访问 常用交互命令 其他命令操作 Hive简述 Hive:由Facebook开源用于解决海量结构化日志的数据统计。 Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。 特点...转载 2019-07-30 00:09:15 · 172 阅读 · 0 评论 -
hive总结03_内部表、外部表和分区表
目录 创建表 管理表 外部表 管理表与外部表的互相转换 分区表 分区表基本操作 分区表注意事项 修改表 重命名表 增加、修改和删除表分区 增加/修改/替换列信息 删除表 创建表 1.建表语法 CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMEN...翻译 2019-08-03 00:46:05 · 351 阅读 · 0 评论 -
hive总结04_查询以及分通抽样
目录 查询 基本查询(Select…From) 全表和特定列查询 列别名 算术运算符 常用函数 Limit语句 Where语句 比较运算符(Between/In/ Is Null) Like和RLike 逻辑运算符(And/Or/Not) 分组 Group By语句 Having语句 Join语句 等值Join 表的别名 内联接 左外连接 右外连接 满外...翻译 2019-08-03 18:26:20 · 624 阅读 · 0 评论 -
hive总结05_函数和压缩
目录 函数 系统内置函数 自定义函数 自定义UDF函数 压缩和存储 Hadoop源码编译支持Snappy压缩 资源准备 编译源码 Hadoop压缩配置 MR支持的压缩编码 压缩参数配置 开启Map输出阶段压缩 开启Reduce输出阶段压缩 文件存储格式 列式存储和行式存储 TextFile格式 Orc格式 Parquet格式 存储和压缩结合 修改Hadoo...翻译 2019-08-03 22:34:45 · 319 阅读 · 0 评论 -
hive总结06_企业级调优
目录 本地模式 表的优化 小表、大表Join 大表Join大表 MapJoin Group By Count(Distinct) 去重统计 笛卡尔积 行列过滤 动态分区调整 分桶 分区 数据倾斜 合理设置Map数 小文件进行合并 复杂文件增加Map数 合理设置Reduce数 并行执行 严格模式 JVM重用 推测执行 压缩 执行计划(Explain) ...翻译 2019-08-03 23:37:21 · 184 阅读 · 0 评论 -
hive总结02_数据类型以及操作数据库
目录 数据类型 基本数据类型 集合数据类型 类型转化 DDL数据定义 创建数据库 查询数据库 显示数据库 查看数据库详情 切换当前数据库 修改数据库 删除数据库 数据类型 基本数据类型 Hive数据类型 Java数据类型 长度 例子 TINYINT by...翻译 2019-08-03 00:48:32 · 239 阅读 · 0 评论
分享