下篇:使用jenkins发布go项目到k8s,接上篇的手工体验改造为自动化发布

[Kubernetes]2. k8s集群中部署基于nodejs golang的项目以及Pod、Deployment详解 k8s集群中部署基于nodejs golang的项目以及Pod、Deployment详解 阅读详情

写在开篇

关于上篇

本篇在 《上篇:带你手工体验从写代码、编译、打包镜像、部署到K8S的全过程》 的基础上,将手动的过程通过jenkins工具将其改造成自动化。

环境准备

图片

我的环境说明:

组件安装方式访问IP访问端口
jenkinsdocker192.168.11.2548086
gitlabdocker192.168.11.2548088
harbordocker192.168.11.2548081

上面的3个组件均以docker的方式安装在同一台宿主机上,且是在k8s集群外部。即使Jenkins、GitLab、Harbor都部署在K8S集群外部,也是可以将Go web项目发布到K8S集群中的。那么,关于如何安装上面的组件,可参考我之前发布过的文章 《云原生下的CICD-3件套快速搭建合集:jenkins+harbor+gitlab》。

当然也可以将CICD的相关组件部署在K8S集群内部,这些内容后面有时间的时候再作分享。

制作jenkins镜像

因jenkinsci/blueocean镜像中没有安装go和kubectl,因此基于它来重新制作一个新的镜像,把go和kubectl安装好。

  1. 从jenkinsci/blueocean镜像启动jenkins容器
[root@workhost jenkins]# docker run -d -u root --name jenkins-ser01 --restart=always -p 8086:8080 -p 50000:50000 -v /data/jenkins/data:/var/jenkins_home -v /var/run/docker.sock:/var/run/docker.sock jenkinsci/blueocean
  1. 将准备好的kubectl工具拷贝到容器里面
# 我的宿主机已经有kubectl二进制包
[root@workhost jenkins]# docker cp /usr/local/bin/kubectl jenkins-ser01:/bin/kubectl

# 拷贝后进入容器检查能否正常执行
bash-5.1# kubectl version
WARNING: This version information is deprecated and will be replaced with the output from kubectl version --short.  Use --output=yaml|json to get the full version.
Client Version: version.Info{Major:"1", Minor:"25", GitVersion:"v1.25.4", GitCommit:"872a965c6c6526caa949f0c6ac028ef7aff3fb78", GitTreeState:"clean", BuildDate:"2022-11-09T13:36:36Z", GoVersion:"go1.19.3", Compiler:"gc", Platform:"linux/amd64"}
Kustomize Version: v4.5.7
  1. 进入容器编译安装golang

由于jenkins镜像是基于Alpine Linux的,需要从源代码编译安装go,不然其它发行版的二进制包是不能直接使用的

# 进入容器
[root@workhost jenkins]# docker exec -it jenkins-ser01 bash

# 编译安装golang
bash-5.1# export GOARCH=amd64
bash-5.1# export GOOS=linux
bash-5.1# wget https://go.dev/dl/go1.20.4.src.tar.gz
bash-5.1# tar -zxf go1.20.4.src.tar.gz
bash-5.1# apk add --no-cache --virtual .build-deps bash gcc go musl-dev
bash-5.1# export GOROOT_BOOTSTRAP="$(go env GOROOT)" GOHOSTOS="$GOOS" GOHOSTARCH="$GOARCH"
bash-5.1# cd ./go/src
bash-5.1# ./make.bash
bash-5.1# go install std

# 查看版本
bash-5.1# which go
/usr/bin/go
bash-5.1# 
bash-5.1# go version
go version go1.18.7 linux/amd64

# 清理现场和退出容器
bash-5.1# cd /
bash-5.1# rm -rf go go1.20.4.src.tar.gz 
bash-5.1# exit
exit
  1. 从容器提交镜像并推送到harbor
[root@workhost jenkins]# docker commit jenkins-ser01 192.168.11.254:8081/jenkins/jenkins:20230505v1
sha256:34685da4c262a14229d4aee5de9a294a877f4974c68f2bcff5e57d3f1420f101
[root@workhost jenkins]# docker push 192.168.11.254:8081/jenkins/jenkins:20230505v1
The push refers to repository [192.168.11.254:8081/jenkins/jenkins]
334b6fe88500: Pushing [====>                                              ]  78.86MB/838.3MB
18df88a5f0e3: Pushed 
704921b7ee47: Pushing [====================>                              ]  94.57MB/235MB
...
...
  1. 最后就可以删掉这个容器
[root@workhost jenkins]# docker stop jenkins-ser01
jenkins-ser01
[root@workhost jenkins]# docker rm jenkins-ser01
jenkins-ser01
  1. 从制作好的镜像启动jenkins容器
[root@workhost jenkins]# docker run -d -u root --name jenkins-ser01 --restart=always -p 8086:8080 -p 50000:50000 -v /data/jenkins/data:/var/jenkins_home -v /var/run/docker.sock:/var/run/docker.sock 192.168.11.254:8081/jenkins/jenkins:20230505v1
a052d6f503d6ef9a90d8cc99bf606daa92b5c890a8bff885d2b189fa1174492a
[root@workhost jenkins]# 
[root@workhost jenkins]# docker ps -a | grep jenk
a052d6f503d6   192.168.11.254:8081/jenkins/jenkins:20230505v1   "/sbin/tini -- /usr/…"   7 seconds ago   Up 6 seconds              0.0.0.0:50000->50000/tcp, :::50000->50000/tcp, 0.0.0.0:8086->8080/tcp, :::8086->8080/tcp                              jenkins-ser01
[root@workhost jenkins]# 
[root@workhost jenkins]# docker exec -it jenkins-ser01 bash
bash-5.1# go version
go version go1.18.7 linux/amd64
bash-5.1# kubectl version
WARNING: This version information is deprecated and will be replaced with the output from kubectl version --short.  Use --output=yaml|json to get the full version.
Client Version: version.Info{Major:"1", Minor:"25", GitVersion:"v1.25.4", GitCommit:"872a965c6c6526caa949f0c6ac028ef7aff3fb78", GitTreeState:"clean", BuildDate:"2022-11-09T13:36:36Z", GoVersion:"go1.19.3", Compiler:"gc", Platform:"linux/amd64"}
Kustomize Version: v4.5.7

构建方式的选择

在 Jenkins 中,Freestyle Project 和 Pipeline 都是常用的构建作业类型,它们都可以用来实现自动化构建和持续集成,但它们的应用场景略有不同,还是得提前了解一下:

  • 如果项目比较简单,例如只需要执行一些 Shell 命令、构建 Maven 项目、执行 Ant 构建等简单操作,那么使用 Freestyle Project 就可以满足需求,因为 Freestyle Project 的配置界面非常简单,可以快速地完成配置和构建。
  • 如果项目比较复杂,例如需要处理多个 Git 仓库、执行多个步骤、分支流程等,那么使用 Pipeline 可能更加适合,因为 Pipeline 具有灵活的流程控制能力,可以支持复杂的项目构建过程。同时,Pipeline 也支持以代码的形式进行定义,具有更好的可维护性和可重用性。

建议根据项目的具体需求,选择使用适合的构建方式。通过对这两种构建方式的了解,相信你已经知道了哪种合适自己了。当然,还有其它的构建方式,比如“多分支流水线”等等,这些以后用到了再去了解吧。

涉及到的插件

下面的插件是我以后要用到的,先提前安装好。本次打算先用“自由软件风格项目”来发布goweb应用,有些插件在本篇还未用到,比如Pipeline,不过装上也无妨。因篇幅有限,本篇不讲如何安装插件,请自行安装好即可。

  • Kubernetes:提供了在 Jenkins 中管理和部署应用程序到 Kubernetes 集群的能力。
  • Kubernetes CLI:提供了在 Jenkins 中使用 kubectl 命令行工具与 Kubernetes 集群交互的能力。
  • Git:用于在 Jenkins 中集成 Git 版本控制系统。
  • Docker:用于在 Jenkins 中构建和推送 Docker 镜像。
  • Credentials:用于在 Jenkins 中配置和管理 GitLab 和 Harbor 的认证凭据。
  • Config File Provider
  • Pipeline:用于在 Jenkins 中创建和管理流水线(Pipeline)作业。
  • Go:是一个官方支持的Jenkins插件,它提供了构建和部署Go应用程序的能力。

提示:如果只需要使用 kubectl 命令行工具与 Kubernetes 集群交互,那么只需要安装 Kubernetes CLI 插件即可。如果需要在 Jenkins 构建管道中使用 Kubernetes 插件提供的更丰富的功能和 Jenkins 语法来管理 Kubernetes 资源,那么需要安装 Kubernetes 插件。在这里,我先把两个都安装上。

goweb项目结构

[root@workhost goweb]# tree
.
├── Dockerfile
├── go.mod
├── main.go
├── README.md
└── static
    └── login.html
[root@workhost goweb]# 

Dockerfile代码:

FROM alpine:latest
WORKDIR /app
COPY static /app/static
COPY main /app
EXPOSE 80
CMD ["./main"]

将dockerfile和项目代码一并提交到gitlab:

git add .
git commit -m "add code"
git push

提交后:

图片

在jenkins发布goweb

  1. 凭据准备

装备好k8s、gitlab、harbor的凭据

图片

连接k8s的凭据,我直接上传了kubeconfig文件:

图片

  1. 创建自由风格的软件项目

图片

  1. 在参数化构建选项中准备好要用到的参数

图片

  • VERSION:这个变量我打算用来作为发布版本的用途,当构建镜像时,会作为镜像的标签
  • HARORB_ADMIN_PASSWD:因为推送镜像时我用到是shell命令的方式,登录harbor的时候引用这个密码变量
  1. 源码管理,配置git

这里要注意指定分支,我的是 “/main”,在gitlab上进入代码仓库里可看到。

图片

  1. 在构建环境中配置连接k8s

图片

  1. 构建步骤中配置编译go代码

图片

  1. 构建步骤中配置构建镜像和推送镜像

图片

  1. 构建步骤中,配置创建deployment和service

图片

cat <<EOF | kubectl apply -f -
apiVersion: apps/v1
kind: Deployment
metadata:
  labels:
    app: goweb
  name: goweb
spec:
  replicas: 6
  selector:
    matchLabels:
      app: goweb
  template:
    metadata:
      labels:
        app: goweb
    spec:
      containers:
      - image: 192.168.11.254:8081/webdemo/goweb:${VERSION}
        imagePullPolicy: Always
        name: goweb
        ports:
        - containerPort: 80
---
apiVersion: v1
kind: Service
metadata:
  labels:
    app: goweb
  name: goweb
spec:
  ports:
  - name: http-port
    port: 5678
    protocol: TCP
    targetPort: 80
    nodePort: 30080
  selector:
    app: goweb
  type: NodePort
  1. 开始运行构建任务

图片

图片

  1. 到k8s上检查
[root@k8s-b-master ~]#  kubectl get deployment,pod,svc
NAME                    READY   UP-TO-DATE   AVAILABLE   AGE
deployment.apps/goweb   6/6     6            6           73m

NAME                        READY   STATUS    RESTARTS   AGE
pod/goweb-d59b979bb-2xrxm   1/1     Running   0          58s
pod/goweb-d59b979bb-jllgt   1/1     Running   0          56s
pod/goweb-d59b979bb-nd8dl   1/1     Running   0          56s
pod/goweb-d59b979bb-prl7m   1/1     Running   0          55s
pod/goweb-d59b979bb-r5csh   1/1     Running   0          58s
pod/goweb-d59b979bb-t2v5n   1/1     Running   0          58s

NAME                 TYPE        CLUSTER-IP    EXTERNAL-IP   PORT(S)          AGE
service/goweb        NodePort    10.96.6.121   <none>        5678:30080/TCP   55m
service/kubernetes   ClusterIP   10.96.0.1     <none>        443/TCP          8d
[root@k8s-b-master ~]# 
  1. 访问

图片

最后

本次采用的是Freestyle Project的构建方式,这是最常见,也是比较传统的方式。下次在k8s部署 jenkins 主从架构,并以 Pipeline 的方式来构建发布。

本文转载于WX公众号:不背锅运维(喜欢的盆友关注我们):https://mp.weixin.qq.com/s/yJ6rkYrwn8RAMLt5uCF9mw

go微服务系列(五):结合jenkins完成持续化集成部署和自动化测试 在微服务开发团队中,一般会采用敏捷开发这类增长式的开发方式,这能有效提高各个微服务的迭代效率。为了让完成的代码能够尽快得到反馈,我们建议尽早将完成的代码提交到代码库中被集成部署,每天一次甚至一天多次,通过自动构建和自动化测试,尽早检测出集成的错误,从而确保错误被尽快发现和纠正。在敏捷开发中,持续集成(CI,Continuous Integration)是为了更快地发现和修复系统集成遇到的各类问题,它建议开发人员一天最少提交一次或者多次代码到代码库中,让自动化工具对提交的代码进行集成部署,并使用自动化测试工具 阅读详情

相关推荐

k8s部署golang工程操作

Kubernetes上运行go web代码

m0_65314003的博客 1228

41、Jenkins部署go项目

在使用jenkins构建go项目之前,我们需要先知道go项目的build和运行流程。

qq23001186的博客 6001

jenkins自动化部署go【docker+jenkins+go+gitlab+harbor+k8s】

首先说一下我的环境,首先准备一台ubuntu18.4虚拟机,安装docker, 然后用docker 安装gitlab[大家可以参考 Ubuntu Docker搭建GitLab以及常规配置使用] 和harbor【大家可以参考 Ubuntu18 安装搭建Harbor】,我尝试过通过docker来安装jenkins,jenkins容器里面在安装docker和harbor通信,但是后面还是遇到很多问题 不好解决, docker默认是无状态的 需要保存的数据都要挂在的虚拟机上, 比如jenkins里面下载的gola.

dz45693的专栏 3030

jenkins构建go项目

jenkins构建go项目

qq_46423987的博客 2028

K8S 上部署 jenkins[go的持续集成]

这里 jenkins 使用的存储为 NFS 安装 nfs 工具 yum install nfs-common nfs-utils -y showmount -e 192.168.52.174 # 运行结果 Export list for 192.168.52.174: /nfs/jenkins * 创建 nfs-client-provisioner deployment cat nfs-client-provisioner.yaml kind: Deployment apiV...

dz45693的专栏 2396

Jenkins 和 k8s 构建企业级 DevOps 容器云平台

DevOps

高飞的博客 28万+

Jenkins+K8s实现Go后端服务自动化部署

整个流程实现了 **开发提交代码→Jenkins自动触发流水线→服务自动部署到K8s** 的闭环,大幅提升部署效率,减少人工操作的失误。

码刀攻城 832

jenkins打包制作Python镜像,并推送至docker仓库,部署到k8s

随着AI大模型的应用越来越广泛,编程语言Python也更显得更加实用。许多对接AI的库都是先在python中应用,才逐步推广至其他编程语言。接下来,我们将介绍python编程的CI/CD流程及其实现。限于篇幅,将按CI/CD分为两部分,本文阐述CI部分,有了docker镜像,想要部署到k8s就容易了。(换句话说,k8s部署本身是不区分语言,java还是python,或者go等等)

天草二十六 1183

使用go-zero-looklook项目将微服务发布到Kubernetes的完整指南

在现代微服务架构中,将服务部署到Kubernetes(k8s)集群已成为行业标准实践。本文将详细介绍如何将go-zero-looklook项目中的微服务发布到k8s集群,涵盖从环境准备到最终部署的完整流程。 ## 1. 环境准备与架构概述 在开始部署前,我们需要确保以下基础设施已经就位: 1. **Kubernetes集群**:用于运行微服务容器 2. **Jenkins**:作为CI/CD...

gitblog_00704的博客 419

基于Jenkins与Kubernetes的CI/CD自动化部署实践

持续集成与持续部署(CI/CD)是现代软件开发中提升交付效率的核心实践,通过自动化构建、测试和部署流程显著提高开发效率。其技术原理主要基于版本控制、容器化和编排系统,其中Jenkins作为流程引擎协调整个流水线,Docker实现应用容器化封装,Kubernetes则负责容器编排与集群管理。这种技术组合在微服务架构中尤其有价值,能够实现从代码提交到生产环境部署的全流程自动化。实际应用场景包括电商平台、金融系统等需要频繁迭代的项目,实测部署效率可提升70%以上。本文详细介绍了基于Jenkins、Git、Mave

weixin_30340617的博客 340

从单机到集群:如何用GitLab+Jenkins+K8s把个人项目升级成“企业级”发布流程

本文详细介绍了如何利用GitLab、Jenkins和Kubernetes(K8s)将个人项目的部署流程升级为企业级CI/CD解决方案。从基础架构选型到实战配置,涵盖自动化流水线设计、K8s部署策略优化以及生产环境监控技巧,帮助开发者构建高效、可靠的发布管道。

weixin_30660027的博客 418

jenkins 发布 go 镜像到 k8s

背景 Jenkins 发布 go 镜像到 k8s 记录 安装 jenkins 安装略过 go go 的官网国内无法访问,所以从国内拉取安装包。 wget https://mirrors.ustc.edu.cn/golang/go1.18.8.linux-amd64.tar.gz tar zxvf go1.18.8.linux-amd64.tar.gz -C /usr/local cat &lt...

fsckzyly的博客 129

Go中的Jenkins API客户端。寻找维护人员来推进这个项目。- bndr / gojenkins

Jenkins API Client for Go About Jenkins is the most popular Open Source Continuous Integration system. This Library will help you interact with Jenkins in a more developer-friendly way. These are some of the features that are currently implemented: Get information on test-results of completed/failed build Ability to query Nodes, and manipulate them. Start, Stop, set Offline. Ability to query Jobs,

教学搭建一个gitlab + jenkins+k8s+docker自动化部署的项目

1. gitlab配置 这里主要是在gitlab上新建一个Project,作为自己的代码仓库。 把自己需要部署的项目推上去即可。 这里大家可以看到 .idea 文件夹下的文件报红,通常情况下我们不想让它被git记录,我们可以向下面那样新建一个 .gitignore 文件中 配置一下即可。接下来我们在这里写自己的项目代码即可。这套自动化部署流程主要地方还是在 jenkins+k8s+docker。 2. jenkins 配置 1. 创建jenkins流水线项目 这个的前提是你已经安装过 jenkins,首先

licux的博客 3664

ADS1299寄存器配置与应用实战指南

本文提供了ADS1299高精度生物电信号采集芯片的寄存器配置与应用实战指南。详细解析了采样率、增益、转换模式等核心寄存器的设置方法,并分享了数据读取、高级功能配置及常见问题的调试心得,帮助开发者快速掌握ADS1299的配置技巧,实现稳定的ECG/EEG信号采集。

weixin_28278377的博客 194

OKCC呼叫中心部署实战指南:从零搭建高效外呼系统

本文提供OKCC呼叫中心系统的完整部署实战指南,从服务器选型、操作系统准备到详细安装步骤和性能优化,帮助企业从零搭建高效外呼系统。重点介绍FreeSWITCH核心组件的安装配置技巧,以及常见问题排查方法,助力企业提升客户服务效率。

weixin_29275257的博客 164

Jenkins打包golang程序后通过K8S部署

Jenkins打包golang程序后通过K8S部署,通过环境变量(ENV)方式传递参数

即心即佛 891

实战指南:在摩尔线程GPU上部署AI模型的完整流程

本文提供了一份详尽的实战指南,手把手教你如何在摩尔线程GPU上成功部署AI模型。内容涵盖从驱动安装、Docker环境配置,到核心的代码适配与模型运行全流程,并分享了性能调优技巧与常见避坑方法,旨在帮助开发者高效利用国产硬件进行AI应用开发。

weixin_29271263的博客 548

【Kubernetes 企业项目实战】06、基于 Jenkins+K8s 构建 DevOps 自动化运维管理平台(上)

DevOps 基本介绍!!!

GG Bond 的博客 3172

ZYNQ Petalinux编译系统启动文件实战指南

本文提出的混合编译加速方案实测可将编译时间从45分钟缩短至18分钟,QSPI双启动方案已在工业控制领域成功应用。Xilinx官方UG1144文档(最新v2023.1版)正点原子《ZYNQ嵌入式开发实战》开源项目Meta-Petalinux(GitHub趋势项目)未来展望:随着Versal平台的普及,Petalinux将支持更多AI加速器原生驱动,值得持续关注。

QQ_778132974的博客 813

RT-DERT安卓部署教程

这个文档中的代码案例,实现了拍照和选图识别,两个功能,可以看效果图。UI做了美化:显示类别机和数量。代码下载地址:通过网盘分享的文件:android_rtdert.zip链接: https://pan.baidu.com/s/1k6e-d_lov1OPgUmit5i_cA?pwd=hpfi 提取码: hpfi–来自百度网盘超级会员v8的分享。

AIOT魔法师 196

基于K8S构建企业级Jenkins CI/CD平台实战(三) 之 带你实战Spring boot/Cloud 项目 CI/CD jenkins自动化构建、部署过程

展示了K8s如何部署 Spring boot 项目,Spring Cloud 其实可以看出基于Spring boot 的按业务功能划分为多个 Spring boot 项目而已。所有部署Spring Cloud就是部署多个Spring boot 项目。在这里就不多说了

LoveSummer 6383

麻辣香锅病毒分析

Spicy Hot Pot浏览器劫持病毒(麻辣香锅病毒)从2020年初被安全公司监测到,因其病毒模块带有MLXG_KM被安全行业代称麻辣香锅病毒。目前通过各种激活工具传播, 包括暴风激活、小马激活和KMS激活等诸多工具,疑似与下载站进行合作推广此类激活工具。Spicy Hot Pot 是一个浏览器劫持 Rootkit,它会将用户的主页更改为指向恶意软件操作员控制的页面,此外还会将内存转储从机器上传到预定义的服务器,并结合本地更新功能以确保其保持更新。通常浏览器劫持者会通过更改用户主页的恶意可执行文件或注册表

不忘初心,护天下安全! 4794

jenkins 部署golang 应用到k8s与测试环境

jenkins 发布golang pipeline,并推送到远程 registry

sftxlin的专栏 1601

python基础:工作会用到的95%的基础python代码都在这了(万字详解!)

本文是一份Python编程语言的快速参考备忘单,涵盖了Python基础语法和常用数据类型。主要内容包括:Python入门指南(打印、变量声明)、内置数据类型(字符串、数值、列表、元组、集合、字典等)、控制结构(判断、循环)、函数定义、文件处理操作以及字符串操作方法(切片、循环遍历等)。这个备忘单特别适合初学者快速查阅Python基础语法,同时也提供了数据类型转换、f-string格式化字符串等实用技巧。通过简洁的代码示例展示了Python的基本语法规则和典型用法。

数据知道的博客 8165

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

上一篇: K8S:分享一次“乌龙问题”(人为导致的无法正常删除命名空间)
下一篇: 对运维这份职业的一些反思
不背锅运维
博客等级 码龄4年 38粉丝 1原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值