基于Kubernetes/K8S构建Jenkins持续集成平台(下)

简介: Jenkins-Master-Slave架构图回顾

Jenkins-Master-Slave架构图回顾:

2387773-20220308171711369-1268596781.png


安装和配置NFS


NFS简介


NFS(Network File System),它最大的功能就是可以通过网络,让不同的机器、不同的操作系统可以共享彼此的文件。我们可以利用NFS共享Jenkins运行的配置文件、Maven的仓库依赖文件等


NFS安装


我们把NFS服务器安装在20.0.0.10机器上

安装NFS服务(在所有K8S的节点都需要安装)

yum install -y nfs-utils

创建共享目录


mkdir -p /opt/nfs/jenkins


vi /etc/exports #编写NFS的共享配置


#内容如下:

/opt/nfs/jenkins *(rw,no_root_squash) *代表对所有IP都开放此目录,rw是读写


启动服务

 

systemctl enable nfs 开机启动

systemctl start nfs 启动


查看NFS共享目录

 

showmount -e 20.0.0.10



 

Kubernetes安装Jenkins-Master


创建NFS client provisioner


nfs-client-provisioner 是一个Kubernetes的简易NFS的外部provisioner,本身不提供NFS,需要现有的NFS服务器提供存储。

 

上传nfs-client-provisioner构建文件


2387773-20220308210246251-1438399793.png


其中注意修改deployment.yaml,使用之前配置NFS服务器和目录


2387773-20220308210510374-572263821.png


构建nfs-client-provisionerpod资源

 

cd nfs-client

kubectl create -f .


查看pod是否创建成功

kubectl get pods


装 Jenkins-Master

上传Jenkins-Master构建文件


2387773-20220308210246251-1438399793.png


创建kube-ops的namespace

因为我们把Jenkins-Master的pod放到kube-ops下

kubectl create namespace kube-ops


构建Jenkins-Masterpod资源

 

cd jenkins-master

kubectl create -f .


查看pod是否创建成功

kubectl get pods -n kube-ops


查看信息,并访问

查看Pod运行在那个Node上


2387773-20220308210805839-1806776709.png


查看分配的端口


2387773-20220308210837149-2021777713.png


然后去访问:http://20.0.0.70:31087/20.0.0.70k8s-node1IP


2387773-20220308211003663-761079535.png


看到这个页面就很简单了!

找到密钥复制进去登录:


2387773-20220308211038474-14770798.png


进去后就创建一个管理员用户都是老生常谈的操作了就不多说了

然后就实现的界面了!


2387773-20220308211052953-754825729.png

然后继续下面的操作!

 


设置插件下载地址:

cd /opt/nfs/jenkins/kube-ops-jenkins-home-jenkins-0-pvc-e90ef63e-5bf2-4747-a9b3-e8fe13ae21cf/updates 

sed -i 's/http:\/\/updates.jenkins- ci.org\/download/https:\/\/mirrors.tuna.tsinghua.edu.cn\/jenkins/g' default.json && sed -i 's/http:\/\/www.google.com/https:\/\/www.baidu.com/g' default.json


Manage Plugins点击Advanced,把Update Site改为

国内插件下载地址https://mirrors.tuna.tsinghua.edu.cn/jenkins/updates/update-center.json

 

 

先安装基本的插件:“


  1. Localization:Chinese
  2. Git
  3. Pipeline
  4. Extended Choice Parameter

还有一个jenkins与k8s整合的插件:

  1. kubernetes

 

重启Jenkins


实现JenkinsKubernetes


系统管理->系统配置->云->新建云->Kubernetes


2387773-20220308223649811-1101937960.png

2387773-20220308223725807-1336577585.png

2387773-20220308223754769-1328973855.png


kubernetes 地 址 采 用 了 kube 的 服 务 器 发 现 :https://kubernetes.default.svc.cluster.local 


namespace填kube-ops,然后点击Test Connection,如果出现 Connection test successful 的提示信息证明 Jenkins 已经可以和 Kubernetes 系统正常通信


Jenkins URL 地址:http://jenkins.kube-ops.svc.cluster.local:8080



构建Jenkins-Slave自定义镜像


Jenkins-Master在构建Job的时候,Kubernetes会创建Jenkins-Slave的Pod来完成Job的构建。我们选择  运行Jenkins-Slave的镜像为官方推荐镜像:jenkins/jnlp-slave:latest,但是这个镜像里面并没有Maven    环境,为了方便使用,我们需要自定义一个新的镜像:


准备材料:


2387773-20220308224012562-452767536.png


Dockerfile文件内容如下:

 

FROM jenkins/jnlp-slave:latest


MAINTAINER lvbu


# 切换到 root 账户进行操作

USER root


# 安装 maven

COPY apache-maven-3.6.2-bin.tar.gz .


RUN tar -zxf apache-maven-3.6.2-bin.tar.gz && \

   mv apache-maven-3.6.2 /usr/local && \

   rm -f apache-maven-3.6.2-bin.tar.gz && \

   ln -s /usr/local/apache-maven-3.6.2/bin/mvn /usr/bin/mvn && \

   ln -s /usr/local/apache-maven-3.6.2 /usr/local/apache-maven && \

   mkdir -p /usr/local/apache-maven/repo


COPY settings.xml /usr/local/apache-maven/conf/settings.xml


USER jenkins

 

然后构建镜像:然后查看

docker build -t jenkins-slave-maven:latest .


2387773-20220308224230341-889380513.png

下面要做的就是修改指向harbor:K8s三台都要做


2387773-20220308224333871-1124280760.png


然后k8s master登录harbor:

docker login -u admin -p Harbor12345 20.0.0.50:85

docker tag jenkins-slave-maven:latest 20.0.0.50:85/library/jenkins-slave-maven:latest

docker push 20.0.0.50:85/library/jenkins-slave-maven:latest


2387773-20220308224608914-452775931.png

2387773-20220308224619391-2105473162.png


测试Jenkins-Slave是否可以创建


创建一个Jenkins流水线项目


2387773-20220308224702801-523095660.png


添加凭据:


2387773-20220308224743395-265228594.png


编写Pipeline,从GItlab拉取代码(使用http方式)使用流水线片段生成器

def git_address = "http://20.0.0.20:82/root/tensquare_back.git"

def git_auth = "904eff5d-41c8-44ad-ba24-7f539a0edb96"


//创建一个Pod的模板,label为jenkins-slave

podTemplate(label: 'jenkins-slave', cloud: 'kubernetes', containers: [

   containerTemplate(

       name: 'jnlp',

       image: "20.0.0.50:85/library/jenkins-slave-maven:latest"

   )

 ]

)

{

   //引用jenkins-slave的pod模块来构建Jenkins-Slave的pod

   node("jenkins-slave"){

       stage('拉取代码'){

           checkout([$class: 'GitSCM', branches: [[name: '*/master']], extensions: [], userRemoteConfigs: [[credentialsId: "${git_auth}", url: "${git_address}"]]])

       }

   }

}


2387773-20220308224903889-533093209.png


然后开始构建:


2387773-20220308225048605-411396646.png


在构建前再开一台jenkins去看节点列表,初始状态是,一个主节点!然后构建的时候刷新会看到从节点上线构建,构建完就会自动下线释放资源

主节点不参与构建

2387773-20220308225336326-1685178326.png

2387773-20220308225344141-394512713.png








相关实践学习
深入解析Docker容器化技术
Docker是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的Linux机器上,也可以实现虚拟化,容器是完全使用沙箱机制,相互之间不会有任何接口。Docker是世界领先的软件容器平台。开发人员利用Docker可以消除协作编码时“在我的机器上可正常工作”的问题。运维人员利用Docker可以在隔离容器中并行运行和管理应用,获得更好的计算密度。企业利用Docker可以构建敏捷的软件交付管道,以更快的速度、更高的安全性和可靠的信誉为Linux和Windows Server应用发布新功能。 在本套课程中,我们将全面的讲解Docker技术栈,从环境安装到容器、镜像操作以及生产环境如何部署开发的微服务应用。本课程由黑马程序员提供。     相关的阿里云产品:容器服务 ACK 容器服务 Kubernetes 版(简称 ACK)提供高性能可伸缩的容器应用管理能力,支持企业级容器化应用的全生命周期管理。整合阿里云虚拟化、存储、网络和安全能力,打造云端最佳容器化应用运行环境。 了解产品详情: https://www.aliyun.com/product/kubernetes
相关文章
|
25天前
|
人工智能 Java API
Java与大模型集成实战:构建智能Java应用的新范式
随着大型语言模型(LLM)的API化,将其强大的自然语言处理能力集成到现有Java应用中已成为提升应用智能水平的关键路径。本文旨在为Java开发者提供一份实用的集成指南。我们将深入探讨如何使用Spring Boot 3框架,通过HTTP客户端与OpenAI GPT(或兼容API)进行高效、安全的交互。内容涵盖项目依赖配置、异步非阻塞的API调用、请求与响应的结构化处理、异常管理以及一些面向生产环境的最佳实践,并附带完整的代码示例,助您快速将AI能力融入Java生态。
240 12
|
2月前
|
人工智能 自然语言处理 安全
Python构建MCP服务器:从工具封装到AI集成的全流程实践
MCP协议为AI提供标准化工具调用接口,助力模型高效操作现实世界。
515 1
|
4月前
|
存储 Kubernetes 监控
Docker与Kubernetes集成挑战及方案
面对这些挑战,并不存在一键解决方案。如同搭建灌溉系统需要考虑多种因素,集成Docker与Kubernetes也需要深思熟虑的规划、相当的技术知识和不断的调试。只有这样,才能建立起一个稳定、健康、高效的Docker-Kubernetes生态,让你的应用像花园中的植物一样繁荣生长。
225 63
|
2月前
|
供应链 监控 搜索推荐
35页PPT|零售行业自助数据分析方法论:指标体系构建平台集成、会员与商品精细化运营实践
在零售行业环境剧变的背景下,传统“人找货”模式正被“货找人”取代。消费者需求日益个性化,购买路径多元化,企业亟需构建统一的指标体系,借助BI平台实现数据驱动的精细化运营。本文从指标体系构建、平台集成到会员与商品运营实践,系统梳理零售经营分析的方法论,助力企业实现敏捷决策与业务闭环。
35页PPT|零售行业自助数据分析方法论:指标体系构建平台集成、会员与商品精细化运营实践
|
2月前
|
SQL 关系型数据库 Apache
从 Flink 到 Doris 的实时数据写入实践 —— 基于 Flink CDC 构建更实时高效的数据集成链路
本文将深入解析 Flink-Doris-Connector 三大典型场景中的设计与实现,并结合 Flink CDC 详细介绍了整库同步的解决方案,助力构建更加高效、稳定的实时数据处理体系。
1189 0
从 Flink 到 Doris 的实时数据写入实践 —— 基于 Flink CDC 构建更实时高效的数据集成链路
|
2月前
|
消息中间件 存储 数据采集
Apache InLong:构建10万亿级数据管道的全场景集成框架
Apache InLong(应龙)是一站式、全场景海量数据集成框架,支持数据接入、同步与订阅,具备自动、安全、可靠和高性能的数据传输能力。源自腾讯大数据团队,现为 Apache 顶级项目,广泛应用于广告、支付、社交等多个领域,助力企业构建高效数据分析与应用体系。
|
6月前
|
jenkins Java Linux
Jenkins环境的部署及任务构建
以上就是Jenkins环境的部署及任务构建的全部内容。希望可以帮助你轻松上手Jenkins,让你的CI/CD之旅更加顺畅!
435 68
|
5月前
|
jenkins 持续交付 开发工具
利用Dockerfile自主构建Jenkins镜像
希望这个过程能善用你的野马般想象,把自己置身于和计算机的卓尔不凡的对话中,让编程的过程充满趣味。
187 36
|
4月前
|
Ubuntu jenkins 机器人
在Jenkins上配置触发Ubuntu环境的图形用户界面(GUI)构建任务。
以上,这趟融合了技术与艺术的Jenkins配置之旅就告一段落了。记住,技术应当像艺术一样有趣和生动,这样才能激发出最大的创新和效率。
126 2
|
9月前
|
容灾 安全 关系型数据库
数据传输服务DTS:敏捷弹性构建企业数据容灾和集成
数据传输服务DTS提供全球覆盖、企业级跨境数据传输和智能化服务,助力企业敏捷构建数据容灾与集成。DTS支持35种数据源,实现全球化数据托管与安全传输,帮助企业快速出海并高效运营。瑶池数据库的全球容灾、多活及集成方案,结合DTS的Serverless和Insight功能,大幅提升数据传输效率与智能管理水平。特邀客户稿定分享了使用DTS加速全球业务布局的成功经验,展示DTS在数据分发、容灾多活等方面的优势。
203 0

推荐镜像

更多