Hive & Hadoop
文章平均质量分 88
hive使用、HQL
Hadoop原理、框架和理解
Just Jump
勿忘来时路上的脚印。站在巨人的肩膀上。
你没有比别人更努力,更不会比别人更不努力。你只是按照你能做到的、最适合你自己的办法去实现自己的目标,去成长为你眼中优秀的人们中的一员。
你自己、优秀的人群;决心、视野;自律、标准。
业精于勤,行成于思。
古之成大事者,不惟有超世之才,亦必有坚韧不拔之志。
苟有恒,何必三更起五更眠;最无益,只怕一日曝十日寒。 十五年只做一个行当。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
[转]科普 | 什么是宽表?
宽表转载 2023-03-20 15:59:46 · 3952 阅读 · 0 评论 -
hive创建临时表
hive创建临时表转载 2023-02-21 23:45:34 · 1098 阅读 · 0 评论 -
hive复杂数据类型map/struct用法实例
使用str_to_map、map_keys、array_contains、collect_set、 concat_ws处理复杂数据类型数据原创 2023-02-01 16:47:08 · 615 阅读 · 0 评论 -
Hadoop系列-MapReduce特性(十三)
MapReduce特性,数据本地化、推测执行转载 2022-11-22 15:46:59 · 757 阅读 · 0 评论 -
Hadoop系列-MapReduce工作原理详解(十二)
MapReduce工作原理详解,包括mapper、reducer、键值对、InputFormat \outputFormat、InputSplit、RecordReader、partitioner、shuffle转载 2022-11-22 15:41:10 · 2925 阅读 · 0 评论 -
Hadoop系列-MapReduce性能优化(十四)
MapReduce调优转载 2022-11-22 15:48:24 · 939 阅读 · 0 评论 -
Hadoop系列-MapReduce架构和工作原理简介(十一)
MapReduce工作原理转载 2022-11-22 01:06:01 · 686 阅读 · 0 评论 -
Hadoop系列-HDFS常用命令(十)
hdfs常用命令转载 2022-11-22 01:05:24 · 2122 阅读 · 0 评论 -
Hadoop系列-HDFS工作流程和原理详解(九)
hadoop系列之hdfs工作流程和原理,包括数据读写流、数据块、机架感知、联邦机制、磁盘均衡转载 2022-11-22 01:05:22 · 1666 阅读 · 0 评论 -
Hadoop系列-HDFS架构和简介(八)
Hadoop系列之HDFS架构转载 2022-11-21 14:43:58 · 810 阅读 · 0 评论 -
Hadoop系列-Yarn资源调度器(七)
Hadoop任务调度器,Yarn资源调度器转载 2022-11-21 14:02:49 · 833 阅读 · 0 评论 -
Hadoop系列-Yarn基础架构(六)
Yarn基础架构转载 2022-11-21 13:46:20 · 526 阅读 · 0 评论 -
Hadoop系列-Hadoop常用命令(五)
hadoop常用命令转载 2022-11-21 13:07:36 · 372 阅读 · 0 评论 -
Hadoop系列-Hadoop特性(四)
Hadoop其他特性-如分布式缓存等转载 2022-11-21 12:57:14 · 549 阅读 · 0 评论 -
Hadoop系列-Hadoop高可用(三)
Hadoop高可用,及其三个主要组件的高可用,共同组成Hadoop生态系统的高可用转载 2022-11-21 12:06:58 · 1963 阅读 · 0 评论 -
Hadoop系列-Hadoop工作原理(二)
Hadoop工作原理转载 2022-11-21 11:53:29 · 579 阅读 · 0 评论 -
Hadoop系列-Hadoop架构、组件和生态简介(一)
Hadoop整体介绍转载 2022-11-21 11:07:02 · 1153 阅读 · 0 评论 -
Hadoop架构、组件、及其术语汇总和理解
Hadoop架构及其组件,相关术语汇总和理解原创 2022-11-18 15:58:04 · 1920 阅读 · 1 评论 -
lateral view json_tuple函数解析非结构化的json数据类型
一、lateral VIEW json_tuple函数使用工作中遇到一个数据表的存储形式,如下:id col1 col2 1234 {"part1" : "61", "total" : "623", "part2" : "560", "part3" : "1", "part4" : "1"} {"to_part2" : "0", "to_part4" : "0", "to_up" : "0", "to_part3" : "0", "to_part34" : "0"}原创 2021-03-31 16:41:34 · 7324 阅读 · 1 评论 -
explode和 lateral view explode函数解析非结构化的map数据类型
工作中遇到使用了Map结构来存储的数据。比如下面所示的这种:(数据表1)col1 col2 {24235:r2,98766:r3} {65432:r1,35689:r2,24577:r3} {13245:r3} {34567:r1,87654:r3} 需求是解析出所有的key,即24235,98766,65432,35689,.... 并统计这些key分别出现了多少次、每个key对应的value值(即r2, r3, r1...)按照key做分组聚合累加是多少。.原创 2021-02-08 12:32:45 · 4435 阅读 · 0 评论 -
《HIVE使用指南》笔记
近期整理了工作中常使用的HQL,结合《HIVE编程指南》这本书做了汇总梳理,希望给将要踏入大数据分析行业的同学们作为参考手册使用,帮助大家尽快上手熟悉HQL。对于常用的命令、函数和功能,我基本从#含义、#用法、#优化、#注意四个方面做整理和备注。HIveQL的使用知识点框架如导图,先看知识导图再详细深入知识点,会对HQL的使用和理解有帮助。一、执行HIVE查询#用法hi...原创 2019-07-15 18:15:15 · 1631 阅读 · 0 评论
分享