Serverless Kubernetes容器服务中快速部署jenkins环境及执行流水线构建-阿里云开发者社区

开发者社区> 阿里云容器服务 ACK> 正文

Serverless Kubernetes容器服务中快速部署jenkins环境及执行流水线构建

简介: 本文主要演示如何在阿里云Serverless Kubernetes服务上快速搭建jenkins持续集成环境,并基于提供的示例应用快速完成应用源码编译、镜像构建和推送以及应用部署的流水线。

本文主要演示如何在阿里云Serverless Kubernetes服务上快速搭建jenkins持续集成环境,并基于提供的示例应用快速完成应用源码编译、镜像构建和推送以及应用部署的流水线。

先决条件:
阿里云Serverless Kubernetes集群。

一 快速开始

1. 部署jenkins

控制台部署或者kubectl部署。

1.1 控制台部署

(1)部署模板 serverless-k8s-jenkins-deploy.yaml

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  annotations:
    deployment.kubernetes.io/revision: "1"
  labels:
    component: jenkins-master
  name: jenkins
spec:
  replicas: 1
  selector:
    matchLabels:
      component: jenkins-master
  strategy:
    type: RollingUpdate
  template:
    metadata:
      labels:
        app: jenkins
        component: jenkins-master
    spec:
      containers:
      - image: registry.cn-hangzhou.aliyuncs.com/acs/jenkins-master-serverless:2.205
        imagePullPolicy: Always
        name: jenkins
        ports:
        - containerPort: 8080
          name: http
          protocol: TCP
        - containerPort: 50000
          name: slavelistener
          protocol: TCP
        resources: {}
        #volumeMounts:
        #  - mountPath: /var/jenkins_home
        #    name: jenkins-home
      #volumes:
      #  - name: jenkins-home
      #    nfs:
      #      path: /
      #      server:
---
apiVersion: v1
kind: Service
metadata:
  labels:
    app: jenkins
    component: jenkins-master
  name: jenkins
spec:
  loadBalancerSourceRanges:
  - 0.0.0.0/0
  ports:
  - name: http
    port: 8080
    protocol: TCP
    targetPort: 8080
  selector:
    component: jenkins-master
  type: LoadBalancer
---
apiVersion: v1
kind: Service
metadata:
  labels:
    app: jenkins
    component: jenkins-master
  name: jenkins-agent
  annotations:
    service.beta.kubernetes.io/alicloud-loadbalancer-address-type: intranet
spec:
  ports:
  - name: slavelistener
    port: 50000
    protocol: TCP
    targetPort: 50000
  selector:
    component: jenkins-master
  type: LoadBalancer

(2)jenkins_home持久化配置
serverless kubernetes目前不支持云盘,要持久化jenkins_home的话, 需要挂载nfs volume, 修改serverless-k8s-jenkins-deploy.yaml中注释部分字段:

        #volumeMounts:
        #  - mountPath: /var/jenkins_home
        #    name: jenkins-home
      .....
      #volumes:
      #  - name: jenkins-home
      #    nfs:
      #      path: /
      #      server:

(3)控制台部署jenkins
应用 -> 无状态 -> 使用模板创建
image
选择集群和命名空间并粘贴需要部署的模板 serverless-k8s-jenkins-deploy.yaml 内容:
image

(4)登录jenkins
image

默认用户名密码为admin/admin,登录后请修改。
image

image

1.2 kubectl部署

(1)下载部署文件

$ git clone https://github.com/AliyunContainerService/jenkins-on-serverless.git
$ cd jenkins-on-serverless

(2)jenkins_home持久化配置
serverless kubernetes目前不支持云盘,要持久化jenkins_home的话, 需要挂载nfs volume, 修改serverless-k8s-jenkins-deploy.yaml中注释部分字段:

        #volumeMounts:
        #  - mountPath: /var/jenkins_home
        #    name: jenkins-home
      .....
      #volumes:
      #  - name: jenkins-home
      #    nfs:
      #      path: /
      #      server:

(3)部署jenkins

$ kubectl apply -f serverless-k8s-jenkins-deploy.yaml

(4)登录jenkins
image

默认用户名密码为admin/admin,登录后请修改。
image

image

2. 创建集群证书、镜像仓库证书并构建和部署示例应用

(1)配置Kubernetes Cloud动态创建slave pod:

Kubernetes Cloud的系统配置使用 证书认证 方式

系统管理 -> 系统设置 -> Cloud -> Kubernetes URL:
image

系统管理 -> 系统设置 -> Cloud -> Kubernetes URL:
Kubernetes.Credentials:
image

点击添加证书:
image

测试连通性:
image

系统管理 -> 系统设置 -> Cloud -> Jenkins URL and tunnel:
image

image

保存配置。

(2)创建jenkins-docker-cfg secret用于镜像仓库权限设置
本示例中使用了阿里云镜像服务提供的北京区域镜像仓库:
打开cloudshell终端:
image

$ docker login -u xxx -p xxx registry.cn-beijing.aliyuncs.com
Login Succeeded
$ kubectl create secret generic jenkins-docker-cfg  --from-file=/home/shell/.docker/config.json
secret/jenkins-docker-cfg created

请注意jenkins-docker-cfg需要与您的jenkins master/slave在同一个命名空间下

(3)构建demo-pipeline并访问应用服务
根据自己镜像仓库信息修改构建参数,并填写kubeconfig中的apiserver url, 本示例中源码仓库分支为serverless,镜像为registry.cn-beijing.aliyuncs.com/haoshuwei/jenkins-java-demo:serverless 请根据提示信息进行替换

image

image

完成。

二 构建环境与示例项目说明

(1)示例项目中使用的源码仓库,分支为serverless

https://github.com/AliyunContainerService/jenkins-demo.git

(2)kaniko 构建和推送docker镜像说明

kaniko可以不依赖docker daemon并在用户空间执行完成Dockerfile中的每一行命令,最终完成docker镜像的构建和推送。

kaniko -f `pwd`/Dockerfile -c `pwd` --destination=${origin_repo}/${repo}:${image_tag}

(3)部署应用到Kubernetes集群插件说明

插件配置如下:
image

对应的Pipeline语法为:

step([$class: 'KubernetesDeploy', authMethod: 'certs', apiServerUrl: 'https://kubernetes.default.svc.cluster.local:443', credentialsId:'k8sCertAuth', config: 'deployment.yaml',variableState: 'ORIGIN_REPO,REPO,IMAGE_TAG'])

声明的变量ORIGIN_REPO,REPO,IMAGE_TAG可在构建执行时把deployment.yaml文件中对应的变量值替换为实际值:

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: jenkins-java-demo
spec:
  replicas: 2
  selector:
    matchLabels:
      app: jenkins-java-demo
  template:
    metadata:
      labels:
        app: jenkins-java-demo
    spec:
      containers:
      - name: jenkins-java-demo
        image: ${ORIGIN_REPO}/${REPO}:${IMAGE_TAG}
        imagePullPolicy: Always
        ports:
        - containerPort: 8080

---
apiVersion: v1
kind: Service
metadata:
  name: jenkins-java-demo
spec:
  ports:
  - port: 80
    targetPort: 8080
    name: jenkins-java-demo
  selector:
    app: jenkins-java-demo
  type: LoadBalancer

(4)Jenkinsfile说明

pipeline{
      // 定义groovy脚本中使用的环境变量
      environment{
        // 本示例中使用DEPLOY_TO_K8S变量来决定把应用部署到哪套容器集群环境中,如“Production Environment”, “Staging001 Environment”等
        IMAGE_TAG =  sh(returnStdout: true,script: 'echo $image_tag').trim()
        ORIGIN_REPO =  sh(returnStdout: true,script: 'echo $origin_repo').trim()
        REPO =  sh(returnStdout: true,script: 'echo $repo').trim()
        BRANCH =  sh(returnStdout: true,script: 'echo $branch').trim()
        API_SERVER_URL = sh(returnStdout: true,script: 'echo $api_server_url').trim()
      }

      // 定义本次构建使用哪个标签的构建环境,本示例中为 “slave-pipeline”
      agent{
        node{
          label 'slave-pipeline'
        }
      }

      // "stages"定义项目构建的多个模块,可以添加多个 “stage”, 可以多个 “stage” 串行或者并行执行
      stages{
    // 定义第一个stage, 完成克隆源码的任务
        stage('Git'){
          steps{
            git branch: '${BRANCH}', credentialsId: '', url: 'https://github.com/AliyunContainerService/jenkins-demo.git'
          }
        }

    // 添加第二个stage, 运行源码打包命令
        stage('Package'){
          steps{
              container("maven") {
                  sh "mvn package -B -DskipTests"
              }
          }
        }

    // 添加第三个stage, 运行容器镜像构建和推送命令, 用到了environment中定义的groovy环境变量
        stage('Image Build And Publish'){
          steps{
              container("kaniko") {
                  sh "kaniko -f `pwd`/Dockerfile -c `pwd` --destination=${ORIGIN_REPO}/${REPO}:${IMAGE_TAG}"
              }
          }
        }

        stage('Deploy to Kubernetes') {
            parallel {
                stage('Deploy to Production Environment') {
                    when {
                        expression {
                            "$BRANCH" == "serverless"
                        }
                    }
                    steps {
            container('kubectl') {
                step([$class: 'KubernetesDeploy', authMethod: 'certs', apiServerUrl: '$API_SERVER_URL', credentialsId:'k8sCertAuth', config: 'deployment.yaml',variableState: 'ORIGIN_REPO,REPO,IMAGE_TAG'])
            }
                    }
                }
                stage('Deploy to Staging001 Environment') {
                    when {
                        expression {
                            "$BRANCH" == "latest"
                        }
                    }
                    steps {
            container('kubectl') {
                step([$class: 'KubernetesDeploy', authMethod: 'certs', apiServerUrl: '$API_SERVER_URL', credentialsId:'k8sCertAuth', config: 'deployment.yaml',variableState: 'ORIGIN_REPO,REPO,IMAGE_TAG'])
            }
                    }
                }
            }
        }
      }
}

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

分享:
阿里云容器服务 ACK
使用钉钉扫一扫加入圈子
+ 订阅

云端最佳容器应用运行环境,安全、稳定、极致弹性

官方博客
官网链接