- 博客(19)
- 资源 (4)
- 收藏
- 关注
原创 搭建hbase单机版(使用外部zk)和java api如何连接
阿里云服务器搭建hbase搭建hbase单机版使用外部zk搭建阿里云服务器单机版
2021-10-02 09:22:08
1878
原创 kafka生产者消费者报错Connection to node -1 could not be established. Broker may not be available.
kafka生产者消费者报错Connection to node -1 could not be established. Broker may not be available.
2021-06-15 11:12:07
2139
原创 Github+jsDelivr+PicGo+Typora搭建高效免费图床
Github+jsDelivr+PicGo+Typora搭建高效免费图床
2021-05-18 14:14:07
420
原创 sql查找某个指定表或视图的所有字段
sql查找某个表或视图的所有字段查找某个表或视图的所有字段最终语句,xhxtest为要查找的表名或视图名,U表示查找表,如果查找视图把U改为VSYSOBJECTS 表存着所有表名SYSCOLUMNS 表存着所有列名
2021-05-18 10:24:00
2057
转载 Hive和Hbase数据整合交互
1、通过 Hive 与 HBase 整合,可以将 HBase 的数据通过 Hive 来分析,让 HBase 支持 JOIN、GROUP 等 SQL 查询语法。2、Hive和Hbase是两种基于Hadoop的不同技术,Hive是一种类SQL的引擎,并且运行MapReduce任务,Hbase是一种在Hadoop之上的NoSQL 的Key/vale数据库。这两种工具是可以同时使用的。就像用Google来搜索,用FaceBook进行社交一样,Hive可以用来进行统计查询,HBase可以用来进行实时查询,数据也可以
2021-04-27 10:22:55
746
原创 HBase常用的Shell命令详解
HBase Shell常用命令和基本操作前言基本操作1. 进入HBase命令操作行2. HBase帮助命令:3. 查询服务器状态4. 查询版本号5. 查看元数据分区信息6. 查看hbase中的表,hbase很重要DDL 操作1. 创建一个命名空间2. 列出所有的命名空间3. 删除命名空间4. 创建一个表5. 列出所有表6. 列出指定命名空间下所有表7. 查看表的描述信息8. 删除一个列族9. 添加一个列族10. 删除表11. 查询表是否存在12. 查看表是否可用
2021-04-23 16:38:16
1804
1
原创 jdk和hadoop的安装与配置
1 安装jdk1.8和环境准备[必选]1.1 下载安装jdk1.1.1 下载jdk下载jdk1.8版本点击下载jdk1.8下载其他版本点击进入oracle官网如果提示需要登录,则输入以下账号密码账号密码来源于网络(2019.7.18):账号:liwei@xiaostudy.com密码:OracleTest12341.1.2 安装jdk上传到linux的/opt/myinstall/目录下解压tar -zxvf jdk1.8.0_144.tar.gz配置环
2021-04-21 11:07:39
4206
原创 linux下载安装mysql5.7教程详解
5 centos7安装MySQL 5.7.315.1 准备工作安装MySQL在集群中任意一台机器上, 这里我安装在hadoop91(192.168.86.91)机器上5.2 下载点击 MySQL Community Downloads下载5.3 删除Centos默认安装的MariaDB# 查找mariadb安装包名字rpm -qa | grep -i mariadb # 卸载mariadb安装包,mariadb-libs-5.5.52-1.el7.x86_64是上一条命令查出结果rp
2021-04-16 16:56:25
674
原创 无法连接sql server,且SQL Server 服务配置管理器不见了
sql server连接时报以下错误在与SQL Server 建立连接时出现与网络相关的或特定于实例的错误,未找到或无法访问服务器,请验证实例名称是否正确并且SQL Server 已配置为允许远程连接。原因此报错原因为sql server的服务未启动。需要去服务管理器启动。但是找了好久都找不到服务配置管理器…。解决办法为使用Win+R快捷键,打开运行窗口,如果版本为SQL Server 2008输入SQLServerManager10.mscSQL Server 2012输入SQL.
2021-04-05 23:04:32
2534
原创 Hive的窗口函数[附实例]
文章目录Hive的窗口函数准备测试数据聚合函数+over()用法描述用法示例未指定分组和排序未指定排序未指定分组指定排序和分组加上window子句窗口函数用法描述LEAD函数和LAG函数FIRST_VALUE函数和LAST_VALUE函数分析函数用法描述更改测试数据ROW_NUMBER函数、RANK函数和DENSE_RANK函数CUME_DIST 函数PERCENT_RANK函数NTILE函数参考网址
2021-04-05 22:33:33
470
原创 Hive的order by、sort by、distribute by和cluster by[附实例]
文章目录Hive的order by、sort by、distribute by和cluster by作用order bysort bydistribute bycluster by示例准备测试数据order bysort bydistribute bycluster by
2021-04-04 22:01:58
1131
1
原创 花了一天的时间将官网描述Hive运算符和函数逐一测试了一遍
Hive运算符和函数使用方法(全)(中文文档, 手动修改翻译并测试)目录参考文档0 前言1 内置函数 UDFs1.1 数学函数1.2 集合函数1.3 类型转换函数1.4 日期函数1.5 条件函数1.6 字符串函数1.7 数据屏蔽函数1.8 加密等其他函数xpathget_json_object2 内置聚合函数UDAF3 内置表生成函数UDTFUDTF用法描述UDTF用法示例**explode (array)****explode (map)**LateralView
2021-04-02 16:38:40
1235
原创 hive explode和LateralView的使用,创建包含数组类型字段的表
hive explode和LateralView的使用,创建包含数组类型字段的表LateralView点击查看LateralView用法lateralview 与用户定义的表生成功能(例如)结合使用explode()。如内置表生成函数中所述,UDTF为每个输入行生成零个或多个输出行。lateralview 首先将UDTF应用于基础表的每一行,然后将结果输出行与输入行连接起来以形成具有提供的表别名的虚拟表。Lateral View 用法lateralView: LATERAL VIEW udtf(e
2021-03-30 16:39:24
724
原创 Hive的bround函数?又叫高斯四舍五入或银行家四舍五入
Hive的bround函数?又叫高斯四舍五入或银行家四舍五入什么叫高斯四舍五入或银行家四舍五入?向最接近数字方向舍入的舍入模式,如果与两个相邻数字的距离相等,则向相邻的偶数舍入。如果舍弃部分左边的数字为奇数,则左边数字加1,如果为偶数,则左边数字不变。例:bround(2.5) = 2, bround(3.5) = 4。hive的round和bround函数具体如下图返回类型函数描述DOUBLEround(DOUBLE a)返回a的四舍五入后的BIGINT值。
2021-03-23 17:47:09
3593
原创 ssh连接慢怎么办?xshell连接虚拟机很慢?
ssh连接慢怎么办?xshell连接虚拟机很慢?很简单 关闭UseDNSvi /etc/ssh/sshd_config将 #UseDNS yes 改为 UseDNS no然后重启ssh服务#centos7 systemctl restart sshd.service#centos6 service sshd restart 重新连接虚拟机即可...
2021-03-23 10:37:02
335
原创 Confluent本地安装和使用
Confluent本地单节点安装0.前言【点击这里查看confluent建立连接器与KsqlDB的使用】我的环境名字版本操作系统centos7confluent5.5.1(商业版)jdk1.81.安装jdk【建议安装】上传到linux的/usr/local/目录下解压tar -zxvf jdk1.8.0_144.tar.gz配置环境变量,修改/etc/profile文件vi /etc/profile添加以下内容#javaexp
2021-03-10 16:51:56
2326
原创 Linux 离线安装MongoDB 4.x(详细)
Linux 离线安装MongoDB 4.4.40.前言版本:Centos7+MongoDB 4.4.4官网:https://www.mongodb.com/1. 下载点击这里自定义版本下载,或者直接点击这里下载version:4.4.4Platform:RedHat / CentOS 7.0Package:tgz2. 安装上传到linux中解压后移动文件存储位置并改名tar -zxvf mongodb-linux-x86_64-rhel70-4.4.4.tgzm
2021-03-04 22:19:46
5373
13
原创 linux下离线安装jq工具
linux下离线安装jq工具0.jq作用jq可以将json数据格式化,也可以按照一个规则将数据切片过滤。1.下载点击这里下载官网:https://stedolan.github.io/jq/2.安装将下载后的安装包上传到linux上任意地方然后执行以下命令解压编译安装tar -zxvf jq-1.5.tar.gzcd jq-1.5./configure && make && make install3.测试输入以下命令测试echo '{"id
2021-02-20 10:46:53
8608
3
原创 linux下离线在线安装lrzsz并使用sz rz命令
linux下离线在线安装lrzsz并使用sz rz命令1.在线安装lrzsz直接使用yum安装lrzsz:yum -y install lrzsz2.离线安装lrzsz2. 1 下载并解压lrzsz安装包:下载地址:https://ohse.de/uwe/releases/lrzsz-0.12.20.tar.gz上传文件到服务器任意位置后解压tar zxf lrzsz-0.12.20.tar.gz编译安装lrzsz./configure –prefix是把所有资源文件放
2021-02-07 14:00:59
749
2
【全】kafak ksql 函数用法大全.doc
2021-04-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人