k8s-jenkins持续发布tomcat项目
k8s-jenkins持续发布tomcat项目
一、需求
这个实验前期后后搞了很久(公司经常插一些别的事过来,然后自己比较懒,再加上自己知识不够扎实)。二进制部署完k8s集群就开始做jenkins持续集成了。
参考这个语雀的部署链接:https://www.yuque.com/duduniao/k8s/gp8n04【3. 交付Jenkins到K8S 开始到maven结束】。
部署过程中遇到很多问题 :jenkins镜像要从版本2.190.3换为blueocean(pipeline用),然后gitlab拉不了代码。。。【我的心酸血泪史:https://www.cnblogs.com/windysai/p/14161282.html 】
(想想,感觉自己做什么都不太成功哇,感谢有个小伙经常帮我解决关键的问题,但我也有时也蛮讨厌他的,“你除了xxx做成功其他实验都没成功过,或者xxx你做了好久了哦”,可能他觉得是句玩笑,也确实是个事实,但还是觉得不太好受滴~~~~控制不了别人的嘴,只能改变自己心态咯——》 付出加倍的努力哇:人家1小时搞掂的活,我花2个小时或者更多,应该。。。应该,也能做出来的吧,哈哈哈,思维有时跟不上呢,默默给自己打气,fighting~~~努力,加油,好好学习)
说回正题吧,之前解决那个利用configmap覆盖tomcat项目数据库配置文件的问题【https://www.cnblogs.com/windysai/p/14305441.html】(是那个说我实验经常做不成功的家伙帮了我,这人真是让我又爱又恨),然后回头搞完这个流程吧(不然心底总觉得有根刺),公司办公电脑开了4台虚机做不了(就12G内存,拉镜像的时候卡死不动),然后我把这环境搬到家里(16G内存),勉强能做。然鹅,家里那个jenkins集群环境最近抽风了!!!jenkins登录连续几天报错:bad gateway,jenkins日志没有找到报错,唯一比较像错误的是kubelet的日志。。。。
jenkins 打开页面及对应日志(昨晚搞到我11点16分,才去洗洗睡的(这个时间要再加8小时)):
kubelet的日志,还没去研究。
然后某天我领导在我工作日志上评论,叫我把这个实验在公司的测试平台跑通发布,想想也挺有道理,毕竟公司环境都有了,配置不用愁。大致介绍下这个环境(这个是公司前运维部署的,单节点master,2个工作节点,服务那列我写的比较简略)
主机名 |
IP |
配置 |
服务 |
master1(单节点,没做集群) |
192.168.0.233 |
4核CPU,10G内存,150G存储 |
Docker、Harbor、kubernetes 1.10.1服务 |
slave01(工作节点1) |
192.168.0.243 |
8核CPU,16G内存,100G存储 |
Docker |
slave02(工作节点2) |
192.168.0.244 |
8核CPU,16G内存,100G存储 |
Docker |
当我看到这个页面,我是很感动的:
二、问题解决
说明:maven是从我的虚机复制出来的,因为构建公司项目要很多依赖包。
还是使用tomcat基础镜像:tomcat:8.5.31(我强调下,大家看这篇文章的时候一定要先看我这篇:https://www.cnblogs.com/windysai/p/14305441.html,因为我就是从这里改的)
##2、构造tomcat镜像(可以理解为预处理)
就是加了启动脚本进去,删除webapps下的文件
(1)Dockerfile
(删掉了拷war包到镜像那句,因为我要用jenkins构建的war包,不是写死的!)
From tomcat:8.5.31 #上面docker pull已拷到本地
COPY wdtz-0.0.1-SNAPSHOT.war /usr/local/tomcat/webapps/ROOT.war #去掉
(2)runtomcat.sh 跟之前文章一样,保持不变
(3)新增构建tomcat镜像并上传到harbor:v8.5.31 ——》 jenkins发布用到
)
## 3、编写交付给k8s的资源配置文件:configmap.yaml,deployment.yaml,service.yaml
(1)configmap.yaml:保持不变
(2)deployment.yaml:spec.template.containers.image 改成:
image: 192.168.0.233/test/tomcat-deploy:v1 ——》jenkins发布用
(3)service.yaml:spec.ports.nodePort: 30031 ——》上篇文章的端口用不了,有范围限制
## 4、jenkins配置部分(直接贴代码了,因为准备洗洗睡)
1 pipeline { 2 agent any 3 environment { 4 GIT_URL="拉取的项目代码地址" 5 BRANCH="分支名" 6 BUILD_PATH="/root/k8s/" 7 } 8 stages { 9 stage('拉取代码') { 10 steps{ 11 echo "git pull。。。" 12 git branch: "${BRANCH}", credentialsId: '拉取gitlab代码的凭证', url: "${GIT_URL}" 13 } 14 } 15 stage('代码编译') { 16 steps{ 17 echo "maven build 。。。" 18 sh "/root/ljy_test/maven-3.6.2-8u232/bin/mvn clean install -e -Dmaven.test.skip=true -P pro -f pom.xml" 19 } 20 } 21 stage('构建镜像') { 22 steps { 23 echo "build docker tomcat deploy image。。。" 24 sh """ 25 echo ' 26 From 192.168.0.233/test/tomcat:v8.5.31 27 LABEL maintainer ljy 28 COPY ./target/wdtz-0.0.1-SNAPSHOT.war /usr/local/tomcat/webapps/ROOT.war 29 ' > Dockerfile 30 docker build -t 192.168.0.233/test/tomcat-deploy:v1 . 31 docker push 192.168.0.233/test/tomcat-deploy:v1 32 """ 33 } 34 } 35 36 stage('部署到k8s节点'){ 37 steps{ 38 echo "deploy project to k8s node。。。" 39 sh "/usr/bin/kubectl apply -f /root/ljy_test/tomcat/configmap.yaml" 40 sh "/usr/bin/kubectl apply -f /root/ljy_test/tomcat/deployment.yaml" 41 sh "/usr/bin/kubectl apply -f /root/ljy_test/tomcat/service.yaml" 42 } 43 } 44 } 45 }
三、实验结果
访问:http://192.168.0.233:30031/report/notice.html