猿星人崛起-优快云博客

原创 SpringBoot 2.0.x启动过程

SpringBoot的入口类@SpringBootApplicationpublic class SpringbootApplication { public static void main(String[] args) { SpringApplication.run(SpringbootApplication.class, args); }}从入口类可以看出，在Main方法中，执行了run;那下来进入run方法看一下run方法代码很显然,这是

2020-06-12 10:51:49 300

原创 Hadoop 高可用集群启动顺序

1、启动Zookeeper在zookeeper集群节点上分别执行zkServer.sh start 启动2、启动journalnode在journalnode集群节点上执行hadoop-daemon.sh start journalnode3、格式化在namenode节点上执行hadoop namenode –format4、启动namenode...

2019-07-11 09:56:47 1175

原创 Hadoop生态常见组件命令操作

一、 Hadoop # HDFS ui界面 http://ip:9870 # 格式化节点 hdfs namenode -format (如果此命令无法进行格式化，则尝试使用下面的命令) 或 hadoop namenode –format（已经过时） # 启动和停止所有节点 ...

2019-07-11 09:31:57 264

原创 Spark SQL 通过hive读取hbase数据

一、环境spark 2.3.3+hive-3.1.1+hbase-2.1.3二、配置1、配置hive的Metastore参考连接：https://blog.youkuaiyun.com/wx2007xing/article/details/888780422、复制hive目录下的hive-hbase-handler-3.1.1.jar到各个节点下spark安装目录的下的jars里...

2019-03-31 10:57:26 1909 1

原创 Hive进阶之Metastore、hiveserver2配置及使用beeline连接Hbase

一、 Hive整合Hbase参考连接：连接地址：https://blog.youkuaiyun.com/wx2007xing/article/details/88862762二、 hive配置Metastore2、配置MetastoreHadoop配置进入到hadoop软件的配置目录# cd $HADOOP_HOME/etc/hadoop# vim core-site.xm...

2019-03-28 21:52:49 2791 1

原创 Hive 整合HBase完整示例

一、前提1、 zookeeper、hadoop、hive、hbase已经安装完成2、其中hive和hbase没有关系二、整合1、分析hive要和hbase通讯，重要的一点就是hive能够加载到连接hbase的jar包；然后通过hive和hbase的api进行通讯2、如何能让hive加载到hbase的jar包？方案一、将hbase的软件包下面的lib里面的ja...

2019-03-28 10:48:57 480

原创 Java 操作HBase 2.1.3的工具类

1、引入pom文件<dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-client</artifactId> <version>2.1.3</version></dependency>...

2019-03-25 17:17:16 1755 4

原创 Centos 7 zookeeper 3.1.4 + hadoop 3.1.2+Hbase 2.1.3完全分布式+高可用（HA）

一、环境说明主机名 Zookeeper (QuorumPeerMain) NameNode Resource Manager DFSZK Failover Controller JournalNode DataNode HMaste...

2019-03-21 15:57:06 2454 1

转载 spring-oauth-server 数据库表说明

以下对spring-oauth-server项目中的oauth.ddl文件(位于/others/database目录)中的表字及段进行说明, 内容包括字段说明与使用场合表名字段名字段说明 oauth_client_details client_id 主键,必须唯一,不能为空. 用于唯一标识每一个客户端(client); 在注册时必须填写(也可由服务...

2019-02-21 15:11:45 485

原创 spring boot 2.1.* pom

描述：在使用spring boot 2.1.*的时候，出现一种这样的情况：依赖已经添加到pom里，但是在代码段却无法自动导入代码里面依旧报红解决办法：在pom里面添加：<repositories> <repository> <id>spring-milestones</id> <na...

2019-02-21 11:07:44 286

原创 Encoded password does not look like BCrypt 异常处理

原由：spirng boot 1.5.* 升级到spring boot 2.0.*，当再次访问授权服务器时出现Encoded password does not look like BCrypt异常分析：断点跟踪，发现是密码格式不匹配导致的。在系统调用matches的时候，会对密码的格式进行校验。解决：修改密码加密的方式。示例：原先：改为：这就是此异常的原因...

2019-02-21 10:56:45 39963 5

原创 Centos7 下Yum 安装 Mysql5.7

一、 mysql下载地址：https://www.mysql.com/downloads/备注：yum下安装mysql不需要手动下载二、 yum安装mysql1、使用wget命令下载mysql5.7的yum源 wget http://dev.mysql.com/get/mysql57-community-release-el7-8.noarch.rpm 2、本地安装yum...

2019-02-19 23:56:39 160