- 博客(32)
- 收藏
- 关注
原创 hue kyuubi sparksql
其实start-thriftserver.sh 执行了spark-submit --class org.apache.spark.sql.hive.thriftserver.HiveThriftServer2 --name Thrift JDBC/ODBC Server)1、由于cdh自带spark版本不支持spark-thrift服务,所以需要在官网下载自己所需的spark版本(http://spark.apache.org/downloads.html)4、启动spark-thrift 服务。
2022-11-13 22:45:44
702
原创 亲测有效 Failed to start LSB 网络服务启动失败的解决办法
【代码】亲测有效 Failed to start LSB 网络服务启动失败的解决办法。
2022-11-12 17:59:04
3495
1
原创 cdh亲测2022/11/12
一、Hadoop大数据平台1、Hadoop 发行版(1) 完全开源的原生的Apache Hadoop(2) Cloudera与Hortonworks公司的CDH和HDP:在Cloudera和Hortonworks合并后,Cloudera公司推出了新一代的数据平台产品CDP Data Center(以下简称为CDP),从2021年1月31日开始,所有Cloudera软件都需要有效的订阅,并且只能通过付费墙进行访问。也就是说CDH各版本都不能免费获取了。
2022-11-12 16:21:53
1095
原创 亲测踩坑,node节点kubelet报错 node \“xxxxx“ not found
亲测踩坑,node节点kubelet报错 node \“xxxxx“ not found
2022-08-01 10:38:47
4956
1
原创 k8s安装真亲测各种解决踩坑
cat /etc/rc.d/rc.localdocker start mymysqlcd /work/TeamCity/ && ./bin/teamcity-server.sh startcd /work/TeamCity/buildAgent/ && ./bin/agent.sh start[root@localhost ~]# cat /etc/rc.d/rc.local
2022-07-29 10:47:18
3701
2
原创 centos安装DataSphere的Qualitis,亲自踩坑
然后安装gradle,服务器没有的可以看我另外一个教程。错误很正常,这种东西过了才是奇迹,
2022-07-28 15:17:46
806
原创 Mysql主从复制(docker搭建)
为什么基于Docker搭建?资源有限 虚拟机搭建对机器配置有要求,并且安装mysql步骤繁琐 一台机器上可以运行多个Docker容器 Docker容器之间相互独立,有独立ip,互不冲突 Docker使用步骤简便,启动容器在秒级别利用Docker搭建主从服务器首先拉取docker镜像,我们这里使用5.7版本的mysql:docker pull mysql:5.7然后使用此镜像启动容器,这里需要分别启动主从两个容器Master(主):docker run -p 3339:330
2020-08-03 17:31:26
152
原创 CityTeam docker构建配置 Springboot docker
# Docker image for springboot file run# VERSION 0.0.1# Author: ltz# 基础镜像使用javaFROM java:8# 作者MAINTAINER liaotianzheng <liaotianzheng@qq.com>VOLUME /work/logs/config:/logsADD ltzserver-1.0-SNAPSHOT.jar ltzConfig.jarEXPOSE 9999RUN bash -c "t.
2020-06-05 16:58:18
399
原创 docker 中eureka client容器 ip地址为网桥的ip,无法访问资源
–net=bridge— 默认选项,用网桥的方式来连接docker容器。–net=host— docker跳过配置容器的独立网络栈。–net=container:NAME_or_ID— 告诉docker让这个新建的容器使用已有容器的网络配置。–net=none— 告诉docker为新建的容器建立一个网络栈,但不对这个网络栈进行任何配置,所以只能访问本地网络,没有外网。...
2020-06-05 10:17:36
797
1
原创 kotlin与JAVA项目混合编译
clean kotlin:compile install -Dmaven.skip.test=true 。请用kotlin编译指令 不要用JAVA
2020-05-27 09:57:46
825
原创 Maven编译时,编译插件顺序问题出错
本人做kotlin与Java混合项目<build> <plugins> <plugin> <groupId>org.jetbrains.kotlin</groupId> <artifactId>kotlin-maven-plugin</artifactId>...
2020-05-08 16:34:00
695
原创 SpringBoot Security 入门 以及登录流程
首先参照官方文档,我们构建一个SpringBoot Security . 本文以Maven构建.粘贴即可<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XM...
2020-05-07 11:45:34
496
转载 vue中ref的作用
vue中的ref其实功能很强大,下面介绍一下如何使用。基本用法,本页面获取dom元素<template> <div id="app"> <div ref="testDom">11111</div> <button @click="getTest">获取test节点</button> </...
2019-11-05 22:30:32
407
原创 Vue自定义拖组件 vuedraggable 和 vue-dragging
一、描述之前用 vue 写过一个在线的多二维码生成服务,体验地址:https://postbird.gitee.io/vue-online-qrcode/后面发现二维码多了之后有时候想要排序,需要将比较重要的放在上面或者第一个,因此拖拽排序的需求就出来了。知道 vue 肯定是有组件存在的,因此就直接搜了搜,找了两个不同的库分别是:vuedraggable awe-dnd两个库的...
2019-11-05 18:48:35
1111
原创 Flux讲解
flux概念<div class="container"> <div class="t1">弹性容器1</div> <div class="t2">弹性容器2</div></div>//.containerdisplay flex //flex布局 //flex-direction col...
2019-10-09 18:35:13
632
原创 SpringBoot加载原理流程以及Spring事件机制简单概述Springboot自动装配
上一篇提到了Spring注解Compoent原理,这次简单介绍一下,什么是Spring事件驱动,Springboot如何利用事物驱动进行加载.@SpringBootApplicationpublic class DemoApplication { public static void main(String[] args) { //10分钟 SpringApplication ...
2019-09-26 13:30:50
333
原创 @Component Spring注解解读以及内部原理
1. Component@Component使用此注解会被Spring加载到IOC容器中2. ComponentScan@ComponentScan 扫描带 @Component 注解3 注解的派生性@Service@Target({ElementType.TYPE})@Retention(RetentionPolicy.RUNTIME)@Documented...
2019-09-26 12:39:12
3566
原创 项目实际应用中redis缓存与数据库一致性问题解决
后台服务代码架构:项目实际应用中redis缓存与数据库一致性问题解决需求起因假设先写数据库,再淘汰缓存:第一步写数据库操作成功,第二步淘汰缓存失败,则会出现DB中是新数据,Cache中是旧数据,数据不一致【如下图:db中是新数据,cache中是旧数据】。假设先淘汰缓存,再写数据库:第一步淘汰缓存成功,第二步写数据库失败【如下图:cache中无数据,db中是旧数据】。结论...
2019-07-19 13:43:54
557
原创 JVM内存模型回收算法
JVM结构原理,GC工作机制程序计数器(Program Counter (PC) Register):官方解释是指向当前线程正在执行的字节码指令的地址、行号。明明说了当前线程正在执行的字节码,为什么还要存储它的地址行号呢?原因是CPU工作的原理是有任务调度的,有可能该字节码没有执行完毕就被挂起啦,这样解释可能就容易理解了。虚拟机栈(Java Virtual Machine Stack...
2019-07-19 12:26:26
262
原创 Kafka精讲及常用开发代码,手动提交offset值
在公司的技术分享,JMS•JMS 是什么:JMS 是 Java 提供的一套技术规范 •JMS 干什么用:用来异构系统 集成通信,缓解系统瓶颈,提高系统的伸缩性增强系统用户体验, 使得系统模块化和组件化变得可行并更加灵活 •通过什么方式:生产消费者模式(生产者、服务器、消费者) •JMS 核心组件l Destination:消息发送的目的地,也就是前面说的Queue和Topi...
2019-07-19 12:05:11
926
原创 kafka使用
下载 wget ftp://ftp.kddilabs.jp/infosystems/apache/kafka/2.2.1/kafka_2.11-2.2.1.tgz配置文件broker.id=0port=9092num.network.threads=3num.io.threads=8socket.send.buffer.bytes=102400socket.rec...
2019-07-19 11:56:40
112
原创 如何成为有趣的人
一.幽默每周准备10个段子二.学会组织故事简洁是智慧的灵魂常用三段式:铺垫、抖包袱、连续笑点铺垫:检索家谱时,我发现我和连环杀手杰夫里,达默有联系抖包袱:但我可以说,他是我妻子这一支的连续笑点: 所以..我想去搞清楚.亲爱的,对不起.用之前的故事改写成这种结构三.让你的故事更具幽默感的小技巧讲的故事要尽可能雨现场联系起来,与现场有关的故事能够...
2019-07-19 11:56:07
127
转载 JVM加载class文件的原理机制
JVM的组成部分我们先把JVM这个虚拟机画出来,如下图所示:从这个图中可以看到,JVM是运行在操作系统之上的,它与硬件没有直接的交互。我们再来看下JVM有哪些组成部分,如下图所示:该图参考了网上广为流传的JVM构成图,大家看这个图,整个JVM分为四部分:## Class Loader类加载器类加载器的作用是加载类文件到内存,比如编写一个He...
2019-07-19 11:54:56
67
原创 JWT(JSON WEB TOKEN)微服务中的无状态用户认证-单点登陆实践Spring-Boot整个JWT
跨域认证的问题互联网服务离不开用户认证。一般流程是下面这样。1、用户向服务器发送用户名和密码。2、服务器验证通过后,在当前对话(session)里面保存相关数据,比如用户角色、登录时间等等。3、服务器向用户返回一个 session_id,写入用户的 Cookie。4、用户随后的每一次请求,都会通过 Cookie,将 session_id 传回服务器。5、服务器收到 ses...
2019-07-19 11:53:16
309
原创 .CannotLoadBeanClassException: Cannot find class WebINF目录下没有class
问题: org.springframework.beans.factory.CannotLoadBeanClassException: Cannot find class [com.XXX.util.spring.EncryptPropertyPlaceholderConfigurer] for bean with name 'propertyConfigurer' defined in U...
2018-03-01 09:19:14
1456
原创 K-means算法分析
主要大致介绍算法有散点图如下所示从图中看出,我们大致可聚成3类,N类也可我们以3类假设,介绍大致过程第一次迭代:1.首先随机取3个点,我们称之为中心点,A,B,C2.计算每个点到中心点的距离,如果某个点距离中心点的距离最近,我们把这个点划分到这个最近的中心点上。大致划分三个类3.迭代3个类,通过每个类的所有点计算出属于该类的中心点,开始第二次进行迭代,达到效果找出相对于属于该类的中心点修正计算点的...
2018-02-08 13:13:44
219
转载 关联规则
参考:http://blog.youkuaiyun.com/eastmount/article/details/533684401.关联规则关联规则(Association Rules)是反映一个事物与其他事物之间的相互依存性和关联性,如果两个或多个事物之间存在一定的关联关系,那么,其中一个事物就能通过其他事物预测到。关联规则是数据挖掘的一个重要技术,用于从大量数据中挖掘出有价值的数据项之间的相关关系。2.置...
2018-02-08 12:55:26
1812
转载 用python实现简单的文本情感分析
情感分析就是分析一句话说得是很主观还是客观描述,分析这句话表达的是积极的情绪还是消极的情绪。原理:比如这么一句话:“这手机的画面极好,操作也比较流畅。不过拍照真的太烂了!系统也不好。”① 情感词要分析一句话是积极的还是消极的,最简单最基础的方法就是找出句子里面的情感词,积极的情感词比如:赞,好,顺手,华丽等,消极情感词比如:差,烂,坏,坑爹等。出现一个积极词就+1,出现一个消极词就
2018-02-07 11:16:26
1702
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人