基于kubernetes、jenkins、etcd的高效构建工具

#kubernetes #k8s #持续集成 #etcd #jenkins #docker #registry #minikube #kubectl

Kubernetes是Google开源的容器集群管理系统,其提供应用部署、维护、 扩展机制等功能,利用Kubernetes能方便地管理跨机器运行容器化的应用。下面我将在macos上搭建minikube与kubectl的k8s环境。

Jenkins是一个开源项目,提供了一种易于使用的持续集成系统,使开发者从繁杂的集成中解脱出来,专注于更为重要的业务逻辑实现上。同时Jenkins能实施监控集成中存在的错误,提供详细的日志文件和提醒功能,还能用图表的形式形象地展示项目构建的趋势和稳定性。

Etcd是一个高可用的键值存储系统,主要用于共享配置和服务发现。下面利用etcd作为旁路系统,主要用来实现状态变更的定制化操作与配置同步。

环境搭建

  • mac os 10.12.3
  • docker 1
  • jenkins 2
  • registry 3
  • minikube && kubectl 4
  • etcd 5

在k8s中创建应用

deploy app in k8s 此时应用所使用的镜像为app-k8stest:2

稍等片刻直到应用启动完毕! app runing

minikube service k8stest --url

输入上述host可以打开应用。 k8s app runing

新建并配置jinkins工作空间

配置jinkins工作空间 构建的代码仓库为git@github.com:mythsumm/k8s-test.git/test 构建时需执行build.sh这个shell脚本,主要有三个步骤。

  1. 用新提交的代码构建新镜像。
  2. 将镜像打上标签并推到registry服务中。
  3. 将容器中的镜像动态更新为刚build好的registry服务中的镜像。
#!/usr/bin/env sh

JOB_NAME=${JOB_NAME:-"k8stest"}
BUILD_NUMBER=${BUILD_NUMBER:-1}

REGISTRY_URL=${REGISTRY_URL:-"127.0.0.1:5000/liaotao/"}

#docker build
echo execute : docker build -t app-${JOB_NAME}:${BUILD_NUMBER} .
docker build -t app-${JOB_NAME}:${BUILD_NUMBER} .

#docker tag
echo execute : docker tag app-${JOB_NAME}:${BUILD_NUMBER} ${REGISTRY_URL}app-${JOB_NAME}:${BUILD_NUMBER}
docker tag app-${JOB_NAME}:${BUILD_NUMBER} ${REGISTRY_URL}app-${JOB_NAME}:${BUILD_NUMBER}

#docker push
echo execute : docker push ${REGISTRY_URL}app-${JOB_NAME}:${BUILD_NUMBER}
docker push ${REGISTRY_URL}app-${JOB_NAME}:${BUILD_NUMBER}

#Update existing container image(s) of resources
/usr/local/bin/kubectl set image deployment/k8stest k8stest=${REGISTRY_URL}app-${JOB_NAME}:${BUILD_NUMBER} --namespace=default --kubeconfig=/Users/ethanliao/.kube/config

构建过程中生成的镜像 registry

如若此时修改server.php中的代码提交且在jenkins中再构建完毕,应用将使用最近一次构建的镜像。

-<?php
-var_dump($_SERVER);

+<?php
+phpinfo();

构建:

jenkins

k8s中的镜像已经改变:

images

此时,应用也改变了。

kubernetes app runing

若应用使用的变量经常发生改变,如数据库地址等,则完全没有必要再重复一遍上面的流程。可以搭配一套旁路系统,当相关应用所使用的变量发生改变时则改变其在etcd中的值,如若此时该应用一直侦听etcd中的值(修改Dockerfile),就可以同步变量至应用容器中。

  1. 搭建etcd服务器
  2. 变量配置系统中用etcd设置值 composer update “linkorb/etcd-php”: “1.2.1” && $client->set(‘xxx’, ‘xxx’);
  3. 容器在启动后运行bypass.sh循环监听值的变化,可改造成独立旁路系统(功能更强大)。

结束语

如上所述,则可搭建一套高效的容器化构建工具。既有k8s的灵活伸缩性、HA、负载均衡,也能兼容各环境变量变化,统一qa、预发布、生产环境,符合微服务概念,有助于敏捷开发,提高工作效率。

refs: