自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(19)
  • 收藏
  • 关注

原创 MySQL增加索引-小记

MySQL增加索引ALTER TABLE bx_crm ADD INDEX phone_index ( cust_phone, cust_code_num, clue_processing_status, cust_clue_time );ALTER TABLE 表名称 ADD INDEX 索引名称 ( 字段1, 字段2, 字段3, 字段4,… );很简单吧!

2021-08-18 17:56:26 157

原创 Deepin系统构建Docker文档

安装Docker看这个https://blog.youkuaiyun.com/u011862015/article/details/105674376安装Docker GUI 看这个https://www.cnblogs.com/mmzs/p/13036473.html

2021-07-22 17:45:10 164

转载 安装MySQL及出现找不到MSVCR.dll 和 MSVCP120.dll - 系统错误如何解决!

C:\Program Files\Common Files\microsoft shared\ClickToRun

2021-05-29 18:03:34 601

原创 Spark SQL-临时视图、创建临时表的3种各种方式

spark-sql createOrReplaceTempView 和createGlobalTempView区别Spark ApplicationSpark Application 使用:针对单个批处理作业多个job通过session交互式不断满足请求的,长期存在的server一个Spark job 可以包含多个map和reduceSpark Application 可以包含多个session实例createOrReplaceTempView:创建临时视图,此视图的生命周期与用于创建.

2020-08-09 22:02:43 14131

原创 oozie5.2.0运行自带hive2测试案例的出现KILLED

启动hadoopstart-dfs.shstart-yarn.shmr-jobhistory-daemon.sh start historyserverhive 启动hiveserver2 hiveserver2 --hiveconf hive.root.logger=INFO,consoleooziecd $OOZIE_HOMEoozied.sh start修改hive2里面的job.properties:当我提交完成任务后会出现KILLED百度后发现是hdfs下oozie

2020-07-09 20:18:55 450

原创 安装Oozie的一路坎坷之九九八十一

这里写目录标题前提梗概安装Oozie前的申明使用Docker构建Oozie1、编译发行包2、 使用docker构建Oozie运行Oozie运行案例测试, oozie安装包里自带的例子:map-reduce.前提梗概适用于Hadoop的Apache Oozie Workflow Scheduler总览Oozie是一个工作流调度程序系统,用于管理Apache Hadoop作业。Oozie Workflow作业是操作的有向无环图(DAG)。Oozie Coordinator作业是由时间(频率)和数据可

2020-07-07 23:26:36 838

转载 云原生与微服务架构基础:02 | 云原生基础架构的组成以及云原生应用的特征

这里写目录标题云原生的基础架构1. 微服务2. 容器3. 服务网格5. 声明式 API云原生应用的特征:云原生与“12 因素”1. 方法论和核心思想2. 编码、部署和运维原则3. 具体内容小结参考云原生的基础架构云原生中既有指导云原生开发的方法论,也包含实践的具体技术。上一篇文章中我们介绍过CNCF 给出的云原生定义中包括微服务、容器、服务网格、不可变基础设施和声明式 API 等代表技术,构建云原生应用就主要靠这些关键技术。下面我们就来具体介绍下这 5 个关键技术。1. 微服务单体应用开发简单,但随

2020-07-05 10:38:45 1741

转载 云原生与微服务架构基础:01 | 为什么说云原生重构了互联网产品开发模式

为什么说云原生重构了互联网产品开发模式?云原生的概念云计算的前世今生阶段1:虚拟化技术阶段2:虚拟机的市场化应用阶段3:容器化和容器编排的兴起云原生到底是什么?云原生出现的背景云原生解决了哪些问题?不断更新的云原生定义总结云原生的概念云原生(Cloud Native)这个概念最早是由 Pivotal 公司的 Matt Stine 提出的。发展至今,云原生架构已然成为互联网行业的技术热点,并在很大程度上推动了 IT 成本的降低和企业的发展。不过为便于你更好地理解和学习这部分内容,在本节课的开始,我们就先来

2020-07-05 10:13:27 1567

原创 记录一次自己爬虫的案例

简单来讲简单来讲,爬虫就是一个探测机器,它的基本操作就是模拟人的行为去各个网站溜达,点点按钮,查查数据,或者把看到的信息背回来。就像一只虫子在一幢楼里不知疲倦地爬来爬去。你可以简单地想象:每个爬虫都是你的「分身」。就像孙悟空拔了一撮汗毛,吹出一堆猴子一样。你每天使用的百度,其实就是利用了这种爬虫技术:每天放出无数爬虫到各个网站,把他们的信息抓回来,然后化好淡妆排着小队等你来检索。抢票软件,就相当于撒出去无数个分身,每一个分身都帮助你不断刷新 12306 网站的火车余票。一旦发现有票,就马上拍下

2020-06-30 23:25:35 349

原创 Phoenix映射hbase原表实现

版本:* hadoop:2.7.5* hbase:1.4.13* phoenix:4.15.0* zookeeper:3.6.0准备工作明确自己是要将hbase中的数据加载到phoenix中如果表命名空间不是默认的,要配置一些属性。这里检查两个事情:检查hbase服务中的hbase-site.xml文件是否有:<property> <name>phoenix.schema.isNamespaceMappingEnabled</name>

2020-06-28 11:47:17 390

翻译 将Deepin装进移动硬盘

记录一下将Deepin装进移动硬盘,实现即插即用。接下来上过程。以win10为例准备工作 U盘 硬盘 电脑 Deepin镜像 深度启动盘制作工具官网下载Deepin镜像及深度启动盘制作工具通过深度启动盘制作工具按提示一路往下安装制作U盘启动盘,至少需要4G。移动硬盘可以按照自己的想法分区,没有限制。博主分了两个区,分别作为Deepin系统、内存空间(自己随便存点什么东西,手机也能看)安装Deepin插入U盘启动盘与移动硬盘。重启电脑,出现logo马上按下自己对应的BIOS键(我按.

2020-06-21 17:11:20 1709

原创 kafka常用语句

kafka重置offsetbin/kafka-consumer-groups.sh --bootstrap-server hadoop-kafka1:9092 --group grpUsers --reset-offsets --all-topics --to-earliest --execute

2020-06-08 17:24:20 392

原创 KAFKA-FLUME练习

KAFKA-FLUME的小练习使用kafka读取flume中的数据1. 启动集群2. 将编写好的 创建主题 topic shell脚本(create_topic.sh)上传到hadoop-kafka1:/usr/local/kafka_2.11-2.4.1(路径是KAFKA_HOME路径)create_topic.sh文件:#!/bin/bashbin/kafka-topics.sh --create --bootstrap-server hadoop-kafka1:9092 --repli

2020-06-07 18:54:01 198

原创 deepin系统—HBase安装配置 phoenix凤凰

安装配置 凤凰1、上传选中的文件包2、 在文件目录下右击打开终端3、将文件上传到各个节点(master、slave1、slave2)4、验证是否上传成功#5、 查看本机python6、查看使用帮助1、上传选中的文件包2、 在文件目录下右击打开终端打开master节点,查看相关信息// An highlighted blockdocker exec -it hadoop-master b...

2020-05-04 17:23:35 337

原创 CentOS搭建Hadoop集群

前期准备 主机 系统 ip地址 master CentOS7 192.168.11.61 slave CentOS7 192.168.11.62 ps:大家使用克隆的方式复制多个独立的虚拟机,每个虚拟机创建...

2020-03-26 17:50:59 191

转载 CMD直接输入Java,Javac,Javap发生乱码解决方式

首先需要设置jdk的默认编码,在之前一篇博文里有然后在cmd里直接执行chcp 65001 代表将cmd换成UTF-8的显示页936是GBK437为英语

2019-12-31 20:51:22 624

原创 MySQL外键的删除

alter table studentadd constraint fk_gradeid foreign key(gradeid) references grade(gradeid);#删除具有主外键关系的表时,要先删除子表,后删除主表#删除外键alter table student drop foreign key fk_gradeid;#删除外键索引alter table st...

2019-12-21 14:48:12 193

原创 MySQL创建外键方式

#创建主表#年级表(id/年级名称)--主表CREATE table if not exists grade( gradeid int(10) primary key auto_increment, gradeName varchar(50) not NULL);#创建外键方式一:创建子表的同时创建外键#学生信息表(学号、姓名、性别、年级、...

2019-12-20 17:11:24 238

转载 Java中Stringbufferd的append()方法

Stringbuffer是动态字符串数组,append( )是往动态字符串数组添加,跟“xxxx”+“yyyy”相当‘+’号。跟String不同的是Stringbuffer是放一起的String1+String2和Stringbuffer1.append("yyyy")虽然打印效果一样,但在内存中表示却不一样;String1+String2 存在于不同的两个地址内存,String...

2019-11-27 16:25:43 989

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除