- 博客(12)
- 收藏
- 关注
原创 DBeaver的SQL脚本管理
在工作中使用DBeaver作为数据库管理工具,虽然也是不错的选择,但是从Navicat转移过来还是不顺手,特别是对于SQL脚本的一个管理,和Navicat相比十分不方便,在探索过DBeaver过后,发现了一个比较方便的管理方法。
2023-12-14 14:52:55
4170
2
原创 Hive中 insert into 和 insert overwrite的区别
insert into 和 insert overwrite 都是往表中插入数据的。
2023-11-20 14:50:39
1261
原创 Dbeaver快捷键
Dbeaver的快捷键还支持自定义,用户可在Dbeaver中打开“快捷键”窗口(快捷键:Ctrl + Shift + L),进行自定义快捷键。以上是Dbeaver常用快捷键的介绍,在使用Dbeaver编辑器时,掌握这些常用快捷键是非常重要的,它们能为用户在操作上提供便利和高效性,缩短操作时间,提高工作效率。希望通过本篇文章的介绍,有助于您更好地使用Dbeaver。
2023-11-20 14:18:51
6123
原创 查日志常用——Linux日志相关命令—查看\关键词查询\截取\日志压缩备份
工作中经常需要查看服务器的任务日志,而日志太多,不好筛选,所以记录一下常用的通过关键词看日志的方法。
2023-11-07 17:56:21
3244
原创 MYSQL分区表的概念以及如何优化大规模数据的查询
以上语句创建了一个sales表,按照sale_date列转化为天数进行分区,共划分了多个子表p20210101存储sale_date小于'738156'的数据,即2021年10月份之前数据,p20210101子表存储sale_date小于'738187'即2023-11-01的数据即2021年10月份数据,以此类推,每个分区都存储一个月的数据。创建分区表需要指定分区键和分区类型。当数据量巨大时,使用普通的表查询效率会非常低下,而使用分区表技术可以将数据按照特定的规则进行拆分,从而提高查询效率和响应速度。
2023-11-01 17:29:05
403
原创 Dbeaver一段时间不操作后数据库连接自动断开问题解决
在工作使用DBeaver过程中发现,一段时间不适用DBeaver会发现数据库连接就会断开,SQL查询失败,非常烦人,总是需要断开重新连接。右键数据库连接点击 编辑连接——>初始化——>连接保持 改成60s。
2023-10-13 17:23:34
2913
1
原创 DBeaver 驱动无法下载无法连接
在使用DBeaver第一次连接数据库时,我是连接HIVE数据库,会下载驱动进行连接,但是报错。打开DBeaver——>窗口——>首选项——>连接——>驱动——>Maven添加国内镜像。原因是无法下载中心仓库的驱动,可以通过配置Maven仓库镜像解决。然后将该镜像向上移动到第一位,应用并关闭再次下载驱动就可以了。输入阿里云Maven国内镜像。
2023-10-12 18:39:56
3654
原创 HBase的表结构及相关概念
从上表可得HBase表有如下特点:1、HBase表由两个要素组成:行键和列族2、行键是唯一的,行键按照字典序排序存储3、列族由不定个数的列组成。即使是同一个列族,不同行的数据列也是允许不一致的。例如“row_key_1”和“row_key_2”两行数据的列族“列族1”可以包含完全不同的列,可以有不同数目的列,也可以有不用的列名。4、某个值可以在HBase里面存储多个版本,最新的版本在最前面。
2023-08-02 16:16:05
873
原创 HBase shell常用操作
获取指定行中指定列族下所有列的数据信息 get 'Student','rowkey3','baseInfo'# 获取指定行中指定列的数据信息 get 'Student','rowkey3','baseInfo:name'# 获取指定行中指定列族下所有列的数据信息get 'Student','rowkey3','baseInfo'命令格式: create '表名称', '列族名称 1','列族名称 2','列名称 N'# 获取指定行中所有列的数据信息get 'Student','rowkey3'
2023-08-02 15:07:47
123
转载 Hive和Habse了解
Hbase和Hive在大数据架构中处在不同位置,Hbase主要解决实时数据查询问题,Hive主要解决数据处理和计算问题,一般是配合使用。Hbase与Hive都是架构在hadoop之上的。都是用HDFS作为底层存储。HIve清洗处理后的结果,如果是面向海量数据随机查询场景的可存入Hbase。通过ETL工具将数据源抽取到HDFS存储;通过Hive清洗、处理和计算原始数据;数据应用从HBase查询数据;
2023-07-25 14:07:20
61
原创 Jenkins运行pipeline脚本构建docker镜像无权限问题
Jenkins运行pipeline脚本构建docker镜像无权限问题,报错拒绝访问,解决方法
2022-08-17 09:30:48
960
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人