K8S(09)交付实战-经过流水线构建dubbo服务
k8s交付实战-流水线构建dubbo服务
目录
1 jenkins流水线准备工做
1.1 参数构建要点
jenkins流水线配置的java项目的十个经常使用参数:java
| 参数名 | 做用 | 举例或说明 |
|---|---|---|
| app_name | 项目名 | dubbo_demo_service |
| image_name | docker镜像名 | app/dubbo-demo-service |
| git_repo | 项目的git地址 | https://x.com/x/x.git |
| git_ver | 项目的git分支或版本号 | master |
| add_tag | 镜像标签,经常使用时间戳 | 191203_1830 |
| mvn_dir | 执行mvn编译的目录 | ./ |
| target_dir | 编译产生包的目录 | ./target |
| mvn_cmd | 编译maven项目的命令 | mvc clean package -Dmaven. |
| base_image | 项目的docker底包 | 不一样的项目底包不同,下拉选择 |
| maven | maven软件版本 | 不一样的项目可能maven环境不同 |
除了base_image和maven是choice parameter，其余都是string parameternode
1.2 建立流水线
1.2.1 建立流水线
建立名为dubbo-demo的流水线(pipeline),并设置Discard old builds 为以下git
| Discard old builds选项 | 值 |
|---|---|
| Days to keep builds | 3 |
| Max # of builds to keep | 30 |
1.2.2 添加10个构建参数
This project is parameterized点击Add Parameter,分别添加以下10个参数github
#第1个参数 参数类型 : String Parameter Name : app_name Description : 项目名 eg:dubbo-demo-service #第2个参数 参数类型 : String Parameter Name : image_name Description : docker镜像名 eg: app/dubbo-demo-service #第3个参数 参数类型 : String Parameter Name : git_repo Description : 仓库地址 eg: https://gitee.com/xxx/xxx.git #第4个参数 参数类型 : String Parameter Name : git_ver Description : 项目的git分支或版本号 #第5个参数 参数类型 : String Parameter Name : add_tag Description : 给docker镜像添加标签组合的一部分,如 $git_ver_$add_tag=master_191203_1830 #第6个参数 参数类型 : String Parameter Name : mvn_dir Default Value : ./ Description : 执行mvn编译的目录,默认是项目根目录, eg: ./ #第7个参数 参数类型 : String Parameter Name : target_dir Default Value : ./target Description : 编译产生的war/jar包目录 eg: ./dubbo-server/target #第8个参数 参数类型 : String Parameter Name : mvn_cmd Default Value : mvn clean package -Dmaven.test.skip=true Description : 编译命令,常加上-e -q参数只输出错误 #第9个参数 参数类型 : Choice Parameter Name : base_image Choices : base/jre7:7u80 base/jre8:8u112 Description : 项目的docker底包 #第10个参数 参数类型 : Choice Parameter Name : maven Choices : 3.6.1 3.2.5 2.2.1 Description : 执行编译使用maven软件版本
1.2.3 添加完成效果以下:
1.2.4 添加pipiline代码
流水线构建所用的pipiline代码语法比较有专门的生成工具
如下语句的做用大体是分为四步:拉代码->构建包->移动包-打docker镜像并推送web
pipeline {
agent any
stages {
stage('pull') { //get project code from repo
steps {
sh "git clone ${params.git_repo} ${params.app_name}/${env.BUILD_NUMBER} && cd ${params.app_name}/${env.BUILD_NUMBER} && git checkout ${params.git_ver}"
}
}
stage('build') { //exec mvn cmd
steps {
sh "cd ${params.app_name}/${env.BUILD_NUMBER} && /var/jenkins_home/maven-${params.maven}/bin/${params.mvn_cmd}"
}
}
stage('package') { //move jar file into project_dir
steps {
sh "cd ${params.app_name}/${env.BUILD_NUMBER} && cd ${params.target_dir} && mkdir project_dir && mv *.jar ./project_dir"
}
}
stage('image') { //build image and push to registry
steps {
writeFile file: "${params.app_name}/${env.BUILD_NUMBER}/Dockerfile", text: """FROM harbor.zq.com/${params.base_image}
ADD ${params.target_dir}/project_dir /opt/project_dir"""
sh "cd ${params.app_name}/${env.BUILD_NUMBER} && docker build -t harbor.zq.com/${params.image_name}:${params.git_ver}_${params.add_tag} . && docker push harbor.zq.com/${params.image_name}:${params.git_ver}_${params.add_tag}"
}
}
}
}
1.3 用流水线完成dubbo-service的构建
记得先在harbor中建立私有仓库appspring
1.3.1 选择参数化构建
进入dubbo-demo后,选择的参数化构建build with parameters ,填写10个构建的参数docker
| 参数名 | 参数值 |
|---|---|
| app_name | dubbo-demo-service |
| image_name | app/dubbo-demo-service |
| git_repo | https://gitee.com/noah-luo/dubbo-demo-service.git |
| git_ver | master |
| add_tag | 200509_0800 |
| mvn_dir | ./ |
| target_dir | ./dubbo-server/target |
| mvn_cmd | mvn clean package -Dmaven.test.skip=true |
| base_image | base/jre8:8u112 |
| maven | 3.6.1 |
1.3.2 填写完成效果以下
1.3.3 执行构建并检查
填写完之后执行bulid
第一次构建须要下载不少依赖包，时间很长，抽根烟，喝杯茶
通过漫长的等待后，已经构建完成了
点击打开 Blue Ocean查看构建历史及过程：api
检查harbor是否已经有这版镜像：浏览器
2 交付dubbo-service到k8s
2.1 准备资源清单
建立清单操做都在7.200上操做服务器
mkdir /data/k8s-yaml/dubbo-server/ cd /data/k8s-yaml/dubbo-server
2.1.1 建立depeloy清单
cat >dp.yaml <<EOF
kind: Deployment
apiVersion: extensions/v1beta1
metadata:
name: dubbo-demo-service
namespace: app
labels:
name: dubbo-demo-service
spec:
replicas: 1
selector:
matchLabels:
name: dubbo-demo-service
template:
metadata:
labels:
app: dubbo-demo-service
name: dubbo-demo-service
spec:
containers:
- name: dubbo-demo-service
image: harbor.zq.com/app/dubbo-demo-service:master_200509_0800
ports:
- containerPort: 20880
protocol: TCP
env:
- name: JAR_BALL
value: dubbo-server.jar
imagePullPolicy: IfNotPresent
imagePullSecrets:
- name: harbor
restartPolicy: Always
terminationGracePeriodSeconds: 30
securityContext:
runAsUser: 0
schedulerName: default-scheduler
strategy:
type: RollingUpdate
rollingUpdate:
maxUnavailable: 1
maxSurge: 1
revisionHistoryLimit: 7
progressDeadlineSeconds: 600
EOF
须要根据本身构建镜像的tag来修改image
dubbo的server服务,只向zk注册并经过zk与dobbo的web交互,不须要对外提供服务
所以不须要service资源和ingress资源
2.2 建立k8s资源
建立K8S资源的操做,在任意node节点上操做便可
2.2.1 建立app名称空间
业务资源和运维资源等应该经过名称空间来隔离,所以建立专有名称空间app
kubectl create namespace app
2.2.2 建立secret资源
咱们的业务镜像是harbor中的私有项目，因此须要建立docker-registry的secret资源：
kubectl -n app \
create secret docker-registry harbor \
--docker-server=harbor.zq.com \
--docker-username=admin \
--docker-password=Harbor12345
2.2.3 应用资源清单
kubectl apply -f http://k8s-yaml.zq.com/dubbo-server/dp.yaml
3分钟后检查启动状况
# 检查pod是否建立： ~]# kubectl -n app get pod NAME READY STATUS RESTARTS AGE dubbo-demo-service-79574b6879-cxkls 1/1 Running 0 24s # 检查是否启动成功： ~]# kubectl -n app logs dubbo-demo-service-79574b6879-cxkls --tail=2 Dubbo server started Dubbo 服务端已经启动
到zk服务器检查是否有服务注册
sh /opt/zookeeper/bin/zkCli.sh [zk: localhost:2181(CONNECTED) 0] ls / [dubbo, zookeeper] [zk: localhost:2181(CONNECTED) 1] ls /dubbo [com.od.dubbotest.api.HelloService]
3 交付dubbo-monitor监控服务到k8s
dobbo-monitor源码地址: https://github.com/Jeromefromcn/dubbo-monitor.git
dubbo-monitor是监控zookeeper状态的一个服务，另外还有dubbo-admin，效果同样
3.1 制做dobbo-monitor镜像
制做镜像在管理机7.200上操做
3.1.1 下载源码
cd /opt/src wget https://github.com/Jeromefromcn/dubbo-monitor/archive/master.zip yum -y install unzip unzip master.zip mv dubbo-monitor-mster /data/dockerfile/dubbo-monitor cd /data/dockerfile/dubbo-monitor
3.1.2 修改配置文件：
直接覆盖它原始的配置
其实它本来就没什么内容,只是修改了addr,端口,目录等
cat >dubbo-monitor-simple/conf/dubbo_origin.properties <<'EOF' dubbo.container=log4j,spring,registry,jetty dubbo.application.name=simple-monitor dubbo.application.owner= dubbo.registry.address=zookeeper://zk1.zq.com:2181?backup=zk2.zq.com:2181,zk3.zq.com:2181 dubbo.protocol.port=20880 dubbo.jetty.port=8080 dubbo.jetty.directory=/dubbo-monitor-simple/monitor dubbo.statistics.directory=/dubbo-monitor-simple/statistics dubbo.charts.directory=/dubbo-monitor-simple/charts dubbo.log4j.file=logs/dubbo-monitor.log dubbo.log4j.level=WARN EOF
3.1.3 优化Dockerfile启动脚本
# 修改jvm资源限制(非必须) sed -i '/Xmx2g/ s#128m#16m#g' ./dubbo-monitor-simple/bin/start.sh sed -i '/Xmx2g/ s#256m#32m#g' ./dubbo-monitor-simple/bin/start.sh sed -i '/Xmx2g/ s#2g#128m#g' ./dubbo-monitor-simple/bin/start.sh # 修改nohup为exec不能改去掉改行最后的&符号 sed -ri 's#^nohup(.*) &#exec\1#g' ./dubbo-monitor-simple/bin/start.sh # 删除exec命令行后面全部行 sed -i '66,$d' ./dubbo-monitor-simple/bin/start.sh
3.1.4 构建并上传
docker build . -t harbor.zq.com/infra/dubbo-monitor:latest docker push harbor.zq.com/infra/dubbo-monitor:latest
3.2 建立资源配置清单
3.2.1 准备目录
mkdir /data/k8s-yaml/dubbo-monitor cd /data/k8s-yaml/dubbo-monitor
3.2.2 建立deploy资源文件
cat >dp.yaml <<EOF
kind: Deployment
apiVersion: extensions/v1beta1
metadata:
name: dubbo-monitor
namespace: infra
labels:
name: dubbo-monitor
spec:
replicas: 1
selector:
matchLabels:
name: dubbo-monitor
template:
metadata:
labels:
app: dubbo-monitor
name: dubbo-monitor
spec:
containers:
- name: dubbo-monitor
image: harbor.zq.com/infra/dubbo-monitor:latest
ports:
- containerPort: 8080
protocol: TCP
- containerPort: 20880
protocol: TCP
imagePullPolicy: IfNotPresent
imagePullSecrets:
- name: harbor
restartPolicy: Always
terminationGracePeriodSeconds: 30
securityContext:
runAsUser: 0
schedulerName: default-scheduler
strategy:
type: RollingUpdate
rollingUpdate:
maxUnavailable: 1
maxSurge: 1
revisionHistoryLimit: 7
progressDeadlineSeconds: 600
EOF
3.2.3 建立service资源文件
cat >svc.yaml <<EOF
kind: Service
apiVersion: v1
metadata:
name: dubbo-monitor
namespace: infra
spec:
ports:
- protocol: TCP
port: 8080
targetPort: 8080
selector:
app: dubbo-monitor
EOF
3.2.4 建立ingress资源文件
cat >ingress.yaml <<EOF
kind: Ingress
apiVersion: extensions/v1beta1
metadata:
name: dubbo-monitor
namespace: infra
spec:
rules:
- host: dubbo-monitor.zq.com
http:
paths:
- path: /
backend:
serviceName: dubbo-monitor
servicePort: 8080
EOF
3.3 建立dobbo-miniotr服务
3.3.1 应用资源配置清单
在任意node节点
kubectl apply -f http://k8s-yaml.zq.com/dubbo-monitor/dp.yaml kubectl apply -f http://k8s-yaml.zq.com/dubbo-monitor/svc.yaml kubectl apply -f http://k8s-yaml.zq.com/dubbo-monitor/ingress.yaml
验证：
~]# kubectl -n infra get pod NAME READY STATUS RESTARTS AGE dubbo-monitor-d9675688c-sctsx 1/1 Running 0 29s jenkins-7cd8b95d79-6vrbn 1/1 Running 0 3d2h
3.3.2 添加dns解析
这个服务是有web页面的，建立了ingress和service资源的,因此须要添加dns解析
vi /var/named/zq.com.zone dobbo-monitor A 10.4.7.10
重启并验证
systemctl restart named dig -t A dubbo-monitor.zq.com @10.4.7.11 +short
3.3.3 访问monitor的web页面
访问dubbo-monitor.zq.com
这里已经能够看到咱们以前部署的dubbo-demo-service服务了，启动了两个进程来提供服务。
至此，dubbo-monitor监控服务已经部署完成。
4 构建dubbo-consumer服务
4.1 构建docker镜像
4.1.1 获取私有仓库代码
以前建立的dubbo-service是微服务的提供者,如今建立一个微服务的消费者
使用git@gitee.com:noah-luo/dubbo-demo-web.git这个私有仓库中的代码构建消费者
先从https://gitee.com/sunx66/dubbo-demo-service这里fork到本身仓库,在设为私有
并修改zk的配置
4.1.2 配置流水线
以前已经在jenkins配置好了流水线，只须要填写参数就好了。
| 参数名 | 参数值 |
|---|---|
| app_name | dubbo-demo-consumer |
| image_name | app/dubbo-demo-consumer |
| git_repo | git@gitee.com:noah-luo/dubbo-demo-web.git |
| git_ver | master |
| add_tag | 200506_1430 |
| mvn_dir | ./ |
| target_dir | ./dubbo-client/target |
| mvn_cmd | mvn clean package -Dmaven.test.skip=true |
| base_image | base/jre8:8u112 |
| maven | 3.6.1 |
4.1.3 查看构建结果
若是构建不报错,则应该已经推送到harbor仓库中了,这时咱们直接再给镜像一个新tag,以便后续模拟更新
docker tag \
harbor.zq.com/app/dubbo-demo-consumer:master_200506_1430 \
harbor.zq.com/app/dubbo-demo-consumer:master_200510_1430
docker push harbor.zq.com/app/dubbo-demo-consumer:master_200510_1430
查看harbor仓库
4.2 准备资源配置清单：
先准备目录
mkdir /data/k8s-yaml/dubbo-consumer cd /data/k8s-yaml/dubbo-consumer
4.2.1 建立deploy资源清单
cat >dp.yaml <<EOF
kind: Deployment
apiVersion: extensions/v1beta1
metadata:
name: dubbo-demo-consumer
namespace: app
labels:
name: dubbo-demo-consumer
spec:
replicas: 1
selector:
matchLabels:
name: dubbo-demo-consumer
template:
metadata:
labels:
app: dubbo-demo-consumer
name: dubbo-demo-consumer
spec:
containers:
- name: dubbo-demo-consumer
image: harbor.zq.com/app/dubbo-demo-consumer:master_200506_1430
ports:
- containerPort: 8080
protocol: TCP
- containerPort: 20880
protocol: TCP
env:
- name: JAR_BALL
value: dubbo-client.jar
imagePullPolicy: IfNotPresent
imagePullSecrets:
- name: harbor
restartPolicy: Always
terminationGracePeriodSeconds: 30
securityContext:
runAsUser: 0
schedulerName: default-scheduler
strategy:
type: RollingUpdate
rollingUpdate:
maxUnavailable: 1
maxSurge: 1
revisionHistoryLimit: 7
progressDeadlineSeconds: 600
EOF
注意修改镜像的tag
4.2.2 建立service资源清单
cat >svc.yaml <<EOF
kind: Service
apiVersion: v1
metadata:
name: dubbo-demo-consumer
namespace: app
spec:
ports:
- protocol: TCP
port: 8080
targetPort: 8080
selector:
app: dubbo-demo-consumer
EOF
4.2.3 建立ingress资源清单
cat >ingress.yaml <<EOF
kind: Ingress
apiVersion: extensions/v1beta1
metadata:
name: dubbo-demo-consumer
namespace: app
spec:
rules:
- host: dubbo-demo.zq.com
http:
paths:
- path: /
backend:
serviceName: dubbo-demo-consumer
servicePort: 8080
EOF
4.3 建立K8S资源
4.3.1 应用资源配置清单：
kubectl apply -f http://k8s-yaml.zq.com/dubbo-consumer/dp.yaml kubectl apply -f http://k8s-yaml.zq.com/dubbo-consumer/svc.yaml kubectl apply -f http://k8s-yaml.zq.com/dubbo-consumer/ingress.yaml # 查看容器启动成功没 ~]# kubectl get pod -n app NAME READY STATUS RESTARTS AGE dubbo-demo-consumer-b8d86bd5b-wbqhs 1/1 Running 0 6s dubbo-demo-service-79574b6879-cxkls 1/1 Running 0 4h39m
4.3.2 验证启动结果
查看log，是否启动成功：
~]# kubectl -n app logs --tail=2 dubbo-demo-consumer-b8d86bd5b-wbqhs Dubbo client started Dubbo 消费者端启动
检查dubbo-monitor是否已经注册成功：
4.3.3 添加dns解析
vi /var/named/zq.com.zone dubbo-demo A 10.4.7.10 # 重启服务 systemctl restart named # 验证 ~]# dig -t A dubbo-demo.zq.com @10.4.7.11 +short 10.4.7.10
浏览器访问http://dubbo-demo.zq.com/hello?name=lg
4.4 模拟版本升级
接下来咱们模拟升级发版，以前已经用同一个镜像打了不一样的tag并推送到从库
固然正常发版的顺序是:
- 提交修改过的代码的代码块
- 使用jenkins构建新镜像
- 上传到私有harbor仓库中
- 更新de文件并apply
4.4.1 修改dp.yaml资源配置清单
修改harbor镜像仓库中对应的tag版本：
sed -i 's#master_200506_1430#master_200510_1430#g' dp.yaml
4.4.2 应用修改后的资源配置清单
固然也能够在dashboard中进行在线修改：
kubectl apply -f http://k8s-yaml.zq.com/dubbo-consumer/dp.yaml ~]# kubectl -n app get pod NAME READY STATUS RESTARTS AGE dubbo-demo-consumer-84f75b679c-kdwd7 1/1 Running 0 54s dubbo-demo-service-79574b6879-cxkls 1/1 Running 0 4h58m
4.4.3 使用浏览器验证
使用浏览器验证：http://dubbo-demo.zq.com/hello?name=lg 在短暂的超时后,便可正常访问 至此，咱们一套完成的dubbo服务就已经交付到k8s集群当中了，而且也演示了如何发版。
相关文章
- 1. K8S实战-交付dubbo服务到k8s集群（六）使用blue ocean流水线构建dubbo-consumer服务
- 2. K8S实战-交付dubbo服务到k8s集群（四）使用blue ocean流水线构建dubbo-demo-service
- 3. K8S实战-交付dubbo服务到k8s集群（五）交付dubbo-monitor监控服务到K8S
- 4. 构建DevOps落地的自动化持续交付流水线
- 5. 《持续交付》（三）部署流水线与构建脚本
- 6. 经过jenkins交付微服务到kubernetes
- 7. 持续交付：经过自动化构建、测试、部署流水线实现可靠的软件发布
- 8. Go 语言持续交付流水线
- 9. DevOps基础-5.3-持续交付：持续交付流水线
- 10. [持续交付实践] 交付流水线设计：安全专项测试
- 更多相关文章...
- • Git 服务器搭建 - Git 教程
- • 使用流水线（pipelined）提高Redis的命令性能 - Redis教程
- • Spring Cloud 微服务实战(三) - 服务注册与发现
- • 适用于PHP初学者的学习线路和建议
相关标签/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
最新文章
- 1. vs2019运行opencv图片显示代码时，窗口乱码
- 2. app自动化 - 元素定位不到？别慌，看完你就能解决
- 3. 在Win8下用cisco ××× Client连接时报Reason 422错误的解决方法
- 4. eclipse快速补全代码
- 5. Eclipse中Java/Html/Css/Jsp/JavaScript等代码的格式化
- 6. idea+spring boot +mabitys(wanglezapin)+mysql (1)
- 7. 勒索病毒发生变种 新文件名将带有“.UIWIX”后缀
- 8. 【原创】Python 源文件编码解读
- 9. iOS9企业部署分发问题深入了解与解决
- 10. 安装pytorch报错CondaHTTPError：******
欢迎关注本站公众号,获取更多信息
相关文章
- 1. K8S实战-交付dubbo服务到k8s集群（六）使用blue ocean流水线构建dubbo-consumer服务
- 2. K8S实战-交付dubbo服务到k8s集群（四）使用blue ocean流水线构建dubbo-demo-service
- 3. K8S实战-交付dubbo服务到k8s集群（五）交付dubbo-monitor监控服务到K8S
- 4. 构建DevOps落地的自动化持续交付流水线
- 5. 《持续交付》（三）部署流水线与构建脚本
- 6. 经过jenkins交付微服务到kubernetes
- 7. 持续交付：经过自动化构建、测试、部署流水线实现可靠的软件发布
- 8. Go 语言持续交付流水线
- 9. DevOps基础-5.3-持续交付：持续交付流水线
- 10. [持续交付实践] 交付流水线设计：安全专项测试