自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(14)
  • 收藏
  • 关注

原创 大数据运维目录

Kerbernet(K8s)篇。

2023-11-24 08:40:47 681

原创 Doris on K8s

以下以doris2.0.3版本为例。

2024-01-13 21:00:18 632

原创 k8s集群对接存储资源

登陆kuboard

2024-01-13 19:23:11 445

原创 NFS服务器部署

nfs的部署较为简单,直接放指令了。

2024-01-13 19:15:35 429

原创 k8s集群部署(kuboard)

该部署方式较为简单,后续基于k8s的文章均以kuboard管理为例。

2024-01-13 19:07:20 960

原创 集群组件介绍

物理机托管在机房,防火墙是paloalto,有需要的小伙伴可以私信我。物理机2台,共112c512gb内存。

2024-01-13 18:46:33 441

原创 StreamPark部署(DockerCompose)

下载mysql-connector-j-8.0.31.jar至同目录。在同目录下新建docker-compose.yaml。文档操作目录: /data/streampark。执行docker compose up -d。在同目录下新建dockerfile。

2023-12-13 18:39:16 734

原创 DataSophon部署(Dockerfile)

由于docker的容器化本质上进程而不是虚拟机,所以原有启动脚本的nohuo会导致docker认为任务已经执行完毕,从而退出,故而需要修改。后续已有打包好的docker-compose模式,将在下期发布,镜像已上传至阿里云(因为是私仓,所以下载速度和并发会有点拮据)通过挂在目录的方式将数据文件放到容器中,方便我们在宿主机上进行修改,但只暴露所需的8081端口到宿主机。EXPOSE是容器暴露端口,理论容器间可以访问的情况下是无需暴露,此处是官方文档中提到的端口。

2023-11-26 10:33:23 863

原创 StreamPark实时运维平台(Docker部署)

由于官方的镜像在国内拉取不到,本次以二进制包的方式进行部署。

2023-11-26 10:19:04 856

原创 大数据基础镜像(Docker)

因为大数据集群需要互相免密。所以在开始之前需要首先构建可以直接互相访问的标准镜像。

2023-11-25 10:35:11 462

原创 K8s集群部署(阿里云基础篇)

使用2023年双11阿里云2c2g的服务器3台(几个小伙伴一起买的)网络环境:多账号没有内网,使用公网直连,并在安全组中对互相的公网ip进行全端口放行。1个master节点和2个node节点无自建Harbor仓库。

2023-11-25 09:45:53 507

原创 Docker/K8s基础环境

参考文档https://developer.aliyun.com/mirror/docker-ce?3. cri-docker(k8s需要)2. docker-ce环境。

2023-11-24 08:45:50 410

原创 从零开发Flink提交小工具

由于开发中会经常提交测试flink应用,并且在某些特殊场景(如服务器以为宕机,手动停机)下需要对大量的flink应用启动,所以考虑开发这套工具。这套工具具备了选择jar包,选择jar包下入口,避免了手动输入的繁琐场景,配备自动查找最新的checkpoint,常用的process内存,mamaged内存,slot数量以及jobmanage的heap内存和offheap内存,并且提供了一建启动yarn-session,一键上传jar包,并且同步留存历史jar包,即使出现了错了也可以手动恢复。

2022-10-02 20:48:36 425

原创 回型矩阵python、java

从数学的规律角度来计算回型矩阵,以python为例def hxjz_math(n): a = np.zeros([n,n]) a[0,0]=1 a[0,n-1]=n a[n-1,n-1]=2*n-1 a[n-1,0]=3*n-2 for i in range(1,int((n-1)/2)+1): a[i,i]=4*(n-2*i+1)+a[i-1,i-1] a[i,n-i-1]=a[i,i]+n-2*i-1

2022-03-21 12:24:33 1892

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除