
hive
文章平均质量分 64
阿龙学堂
砖搬的多了,就自然知道怎样省力了
展开
-
SqlBoy:打折日期交叉问题
SqlBoy:打折日期交叉问题原创 2022-08-02 17:00:49 · 920 阅读 · 1 评论 -
SqlBoy:间隔连续问题
SqlBoy:间隔连续问题原创 2022-08-02 16:13:29 · 1607 阅读 · 0 评论 -
SqlBoy:分组问题
SqlBoy:分组问题原创 2022-08-02 16:10:42 · 424 阅读 · 0 评论 -
SqlBoy:连续问题
SqlBoy:连续问题原创 2022-08-02 16:07:38 · 246 阅读 · 0 评论 -
SqlBoy:异或、交换奇偶
SqlBoy:异或、交换奇偶原创 2022-08-02 16:03:42 · 256 阅读 · 0 评论 -
Proesto安装使用
Presto1、Proesto安装使用[官网地址] https://prestodb.github.io/overview.html1.1、介绍Presto is a distributed system that runs on a cluster of machines. A full installation includes a coordinator and mult...原创 2019-09-25 20:26:21 · 340 阅读 · 0 评论 -
Hive优化
Hive优化可以通过以下来进行考虑1、建立表分区使用场景Hive在做Select查询时,一般会扫描整个表内容,会消耗较多时间去扫描不关注的数据。此时,可根据业务需求及其查询维度,建立合理的表分区,从而提高查询效率。指定静态分区或者动态分区静态分区:静态分区是手动输入分区名称,在创建表时使用关键字PARTITIONED BY指定分区列名及数据类型。应用开发时,使用ALTER T...原创 2019-05-17 20:47:43 · 2910 阅读 · 0 评论 -
Kettle入门教程
Kettle入门教程最近做的项目用到了ETL工具Kettle,这个工具相当好用,可以将各种类型数据作为数据流,经过处理后再生成各种类型的数据。正如其名“水壶”,将各个地方的水倒进水壶里,再用水壶倒入不同的容器。不过一来初学乍用,二来对此任务不是很感兴趣,研究的不是很深入,可能是以一种不科学的方法使用的,但观教程,常用的内容似乎也涉及到了,并且Y大说过,要善于总结,于是有了这篇,作为入门说明吧。一、...转载 2018-04-14 16:00:23 · 3219 阅读 · 0 评论 -
总结杂谈
架构设计 图组件选择(调研+压测试)高可靠压缩格式文件格式每秒,分钟数据量 未入集群 离线 实时那块高可靠没有做好?flume memory |spark yarn开发内容:hivespark存储监控java1.GC jvm垃圾选择器参数串行收集器、并行收集器、并发收集器。GC有两种类型:Scavenge GC和Full GC。以使用-XX:+UseSerialGC打开。-XX:Paralle...原创 2018-04-09 10:51:07 · 392 阅读 · 0 评论 -
hive16条优化
优化点:从底向上 1)压缩 选型:不同场景(空间、解压速度、splitable) 好处: 2)Storage Format 行式 vs 列式(olap 90%+) SQL on hadoop: textfile、sequencefile rcfile: 行+列 o...原创 2018-04-09 10:49:36 · 450 阅读 · 0 评论 -
SQL数据库面试题以及答案(50例题)
SQL数据库面试题以及答案(50例题)转载来自:http://blog.youkuaiyun.com/hundan_520520/article/details/54881208Student(S#,Sname,Sage,Ssex)学生表S#:学号Sname:学生姓名Sage:学生年龄Ssex:学生性别Course(C#,Cname,T#)课程表C#:课程编号Cname:课程名称T#:教师编号转载 2018-01-19 15:08:26 · 3252 阅读 · 0 评论 -
安装zookeeper集群注意事项
安装zookeeper集群注意事项:1、准备工作 1.1、配置好 hostname 1.2、配置好ip地址 1.3、配置好 /etc/hosts域名映射 1.4、关闭防火墙 chkconfig iptables off (永久关闭) 1.5、安装jdk(配置 好 注意:source /etc/profile) 1.6、配置免密登陆 ssh-key原创 2018-01-15 20:36:56 · 1812 阅读 · 0 评论