
Hive基础
Nix GnaHz
天道酬勤
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hive第一天——Hive安装与配置
Hive第一天——Hive安装一、启动并登录mysql如果是使用docker安装的mysql则用下面方法登录并进入mysql命令行1.启动docker镜像:[root@localhost ~]# docker run -p 3306:3306 --name mymysql -v $PWD/conf:/etc/mysql/conf.d -v $PWD/logs:/logs -v $PWD/d...原创 2019-09-23 20:23:42 · 391 阅读 · 0 评论 -
Hive第六天——Hive函数(开窗函数之累计统计)
本文部分参考自:https://blog.youkuaiyun.com/qq_23897391/article/details/100558433Hive第六天——Hive函数自己的话:千里之行,始于足下。每天都要保持前进,我势必要有强劲的实力,再跟明天的自己问好。开窗函数:累计统计这类函数叫法很多,包括分析函数、窗口函数、开窗函数、分析窗口函数,其实说的都是一类函数一、开窗函数简介开窗函...原创 2019-09-27 21:45:14 · 7882 阅读 · 0 评论 -
Hive第六天——Hive函数(GROUP BY语句、HAVING语句、ORDER BY语句)
本文部分参考自:https://blog.youkuaiyun.com/qq_23897391/article/details/90897373Hive第六天——Hive函数自己的话:千里之行,始于足下。每天都要保持前进,我势必要有强劲的实力,再跟明天的自己问好。GROUP BY语句、HAVING语句、ORDER BY语句一、GROUP BY语句GROUP BY语句 表示按照某些字段的值进行...原创 2019-09-27 16:17:24 · 7853 阅读 · 1 评论 -
Hive第五天——Hive函数(表生成函数:行转列)
本文部分参考自:https://blog.youkuaiyun.com/qq_23897391/article/details/98724777Hive第五天——Hive函数自己的话:千里之行,始于足下。每天都要保持前进,我势必要有强劲的实力,再跟明天的自己问好。表生成函数(行转列)一、表生成函数简介在Hive中,所有的表生成函数,包括用户自定义的和内置的,都统称为用户自定义表生成函数(us...原创 2019-09-26 21:34:02 · 460 阅读 · 0 评论 -
Hive第五天——Hive函数(URL解析函数)
本文部分参考自:https://blog.youkuaiyun.com/qq_23897391/article/details/95303594Hive第五天——Hive函数自己的话:千里之行,始于足下。每天都要保持前进,我势必要有强劲的实力,再跟明天的自己问好。URL解析函数在工作中,我们除了JSON格式还会经常遇到URL格式的日志数据,本文来详细介绍在Hive中解析URL的函数:1.par...原创 2019-09-26 20:22:47 · 2073 阅读 · 0 评论 -
Hive第五天——Hive函数(JSON解析函数)
本文部分参考自:https://blog.youkuaiyun.com/qq_23897391/article/details/95091712Hive第五天——Hive函数自己的话:千里之行,始于足下。每天都要保持前进,我势必要有强劲的实力,再跟明天的自己问好。Json函数解析在工作中我们会经常遇到JSON格式的日志数据,本文来详细介绍在Hive中解析JSON字符串的函数:1.get_jso...原创 2019-09-26 19:59:01 · 1201 阅读 · 0 评论 -
Hive第四天——Hive函数(常用数学函数与字符串函数)
本文参考自:https://blog.youkuaiyun.com/qq_23897391/article/details/94715278Hive—常用数学函数与常见字符串函数一、常见数学函数1.四舍五入 roundround(DOUBLE a)功能:传入DOUBLE类型的参数a,返回对a四舍五入的整数值,但返回的数据类型是DOUBLE,所以会有 .0hive (app)> selec...原创 2019-09-25 21:02:26 · 1505 阅读 · 0 评论 -
Hive第三天——Hive使用(二)(join语句)
文章部分参考自:https://blog.youkuaiyun.com/qq_23897391/article/details/92636509Hive第三天——Hive使用自己的话:黑发不知勤学早,白首方悔读书迟每天都要保持前进,我势必要有强劲的实力,再跟明天的自己问好。一、DML1.插入单条数据到表中hive> insert into table t_seq values('10','...原创 2019-09-25 20:33:59 · 467 阅读 · 0 评论 -
如何让Hive简单的查询不启用Mapreduce而启用Fetch task本地运行
文章部分参考自:https://blog.youkuaiyun.com/levy_cui/article/details/52637493让Hive简单的查询不启用Mapreduce而启用Fetch task本地运行启用MapReduce会消耗系统性能。从Hive0.10.0版本开始,对于简单的不需要聚合的类似SELECT from LIMIT num语句,不需要起MapReduce job,直接通...原创 2019-09-24 21:35:34 · 510 阅读 · 0 评论 -
Hive第二天——Hive使用(一)
Hive第二天——Hive使用自己的话:黑发不知勤学早,白首方悔读书迟每天都要保持前进,我势必要有强劲的实力,再跟明天的自己问好。尽量使用Xshell启动两个窗口连接虚拟机hadoop01,一个在hive下操作,另一个在linux下操作。一、建表表定义信息会被记录到hive的元数据中(mysql的hive库)会在hdfs上的hive库目录中创建一个跟表名一致的文件夹往表目录中放入文...原创 2019-09-24 21:19:58 · 780 阅读 · 0 评论 -
Hive第一天——Hive介绍以及简单使用
Hive第二天——Hive介绍以及简单使用自己的话:黑发不知勤学早,白首方悔读书迟每天都要保持前进!一、什么是Hive数据库:mysql、oracle、sqlserver、DB2、sqlite、MDB数据仓库:Hive,是MR的客户端,也就是说不必要每台机器都安装部署HiveHIVE是一个可以将sql翻译为MR程序的工具HIVE支持用户将HDFS上的文件映射为表结构,然后用户就可...原创 2019-09-23 21:25:32 · 1438 阅读 · 0 评论 -
java.sql.SQLException: Access denied for user 'root'@'localhost' (using password: YES)(hive启动报错)解决方案
java.sql.SQLException: Access denied for user ‘root’@‘localhost’ (using password: YES)(hive启动报错)错误原因:以上错误主要原因就是IP:192.168.72.131没有访问权限,需要再数据库添加这个IP的访问权限。解决方案:mysql添加数据库访问权限:grant all privileges ...原创 2019-09-23 21:25:46 · 1760 阅读 · 1 评论 -
Hive第七天——Hive函数(开窗函数之组内排序)
本文部分参考自:https://blog.youkuaiyun.com/qq_23897391/article/details/100688796Hive第七天——Hive函数自己的话:千里之行,始于足下。每天都要保持前进,我势必要有强劲的实力,再跟明天的自己问好。开窗函数:组内排序开窗函数的固定写法:over(partition by 列名1,列名2 …… order by 列名3,列名4...原创 2019-09-28 10:50:37 · 2528 阅读 · 0 评论